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本 书 是 一 本 软件 测试 技术 方面 的 实战 教程 ,编写 时 参照 国际 软件 测试 认证 委员 会 的 软件 测试 人 员 认 
证 课程 大 纲 选取 知识 点 ,兼顾 当前 软件 测试 岗位 对 技能 的 要 求 。 本 书 既 介绍 了 经 典 的 软件 测试 基础 理论 ， 
又 介绍 了 最 新 的 测试 方法 。 书 中 大 部 分 章节 以 与 软件 测试 技术 相关 的 实际 案例 作为 开篇 ,使 得 对 知识 的 
讲解 更 生动 。 主 要 内 容 包括 : 软件 测试 基础 .软件 测试 管理 软件 缺陷 管理 ,单元 测试 .集成 测试 ,系统 测 
试 ,性 能 测试 .安全 性 测试 Spring MVC Web 应 用 测试 .Android App Wik. Web 前 端 测试 等 。 本 书 的 最 大 
特点 是 将 理论 与 实际 操作 有 机 结合 在 一 起 , 实 训 任务 丰富 .图文并茂 .深入浅出 .讲解 详尽 .实践 性 强 。 

本 书 既 可 作为 高 等 院 校 计 算 机 软件 工程 .软件 技术 .计算 机 应 用 技术 .软件 与 信息 服务 等 相关 专业 的 
教材 ,也 可 作为 广大 软件 行业 从 业 人 员 ( 软 件 测试 人 员 、 软 件 开发 人 员 ,项 目 经 理 等 ) 进 行 软件 测试 实践 的 
培训 教材 ,还 可 作为 参加 ISTQB 测试 人 员 认 证 的 辅助 教程 。 


本 书 封 面 贴 有 清华 大 学 出 版 社 防伪 标签 ,无 标签 者 不 得 销售 。 
版 权 所 有 ,侵权 必 究 。 侵 权 举 报 电 话 : 010-62782989 13701121933 


图 书 在 版 编目 (CIP) 数 据 


软件 测试 实战 教程 /高 科 华 ,高 珊 珊 编著 . 一 北京 : 清华 大 学 出 版 社 ,2019 
(高 等 学 校 软件 工程 专业 系列 教材 ) 
ISBN 978-7-302-52192-1 


I. O*K H. Owe ORe H. 软件 一 测试 一 教材 N. DTP311.55 


中 国 版 本 图 书馆 CIP 数据 核 字 (2019) 第 013070 号 


责任 编辑 : й 芝 李 Hk 
封面 设计 : 刘 键 
责任 校对 : 胡 伟 民 
责任 印 制 : AT 


出 版 发 行 : 清华 大 学 出 版 社 
网 HE: http://www. tup. com. сп, http://www. wqbook. com 
地 b: 北京 清华 大 学 学 研 大 厦 A 座 AB Hj: 100084 
Ж 总 机 : 010-62770175 AB W: 010-62786544 
投稿 与 读者 服务 : 010-62776969, c-service@tup. tsinghua. edu. cn 
质量 反馈 : 010-62772015, zhiliang@ tup. tsinghua. edu. cn 
课件 下 载 : http://www. tup. com. cn,010-62795954 


印 R 者 : 清华 大 学 印刷 厂 

经 W: 全 国 新 华 书店 

F 本: 185mmX260mm M 张 : 21 Ф Ш. 535 千 字 

版 ”次 : 2019 年 5 月 第 1 版 印 ”次 : 2019 年 5 月 第 1 次 印刷 
印 数 : 1 一 1500 

定 ft: 49.50 元 


产品 编号 : 080903-01 


为 什么 写 这 本 书 

中 国 软件 行业 正 处 于 高 速 发 展 成 长 期 。 根 据 工业 和 信息 化 部 的 统计 ,2017 年 我 国 软件 
业务 收入 达到 55 037 亿 元 ,从 业 人 员 达 到 600 万 人 。 随 着 软件 越 来 越 复杂 ,以 及 人 们 对 软 
件 工程 的 深入 研究 , 越 来 越 多 的 人 认识 到 软件 测试 对 提高 软件 质量 的 重要 作用 。 据 统计 , 软 
件 评估 和 测试 的 成 本 占 软 件 开发 总 成 本 (时 间 和 资金 ) 的 25% 一 50%。 一 些 著名 的 公司 , 例 
如 ,Microsoft、IBM、Google、 阿 里 巴巴 等 ,对 软件 测试 非常 重视 ,在 软件 研发 过 程 中 投入 了 
大 量 的 资金 和 人 力 进行 软件 测试 工作 。 国 内 软件 行业 对 软件 测试 人 员 的 需求 量 呈 现 逐 年 增 
加 的 态势 。 据 国家 权威 部 门 的 统计 ,中 国 软件 人 才 缺 口中 ,其 中 30% 为 软件 测试 人 才 。 中 
国 软件 业 每 年 新 增 约 20 万 测试 岗位 就 业 机 会 ,而 企业 .学 校 培养 出 的 测试 人 才 却 不 足 需求 
量 的 1/10, 这 种 测试 人 才 需 求 与 供给 间 的 差距 仍 在 拉 大 。 为 了 应 对 软件 测试 人 员 的 匮乏 问 
题 ,高 等 院 校 软 件 技术 相关 专业 纷纷 设立 软件 测试 方向 ,有 些 院 校 还 新 建 了 软件 测试 专业 。 
软件 测试 成 为 软件 技术 相关 专业 的 必修 课 。 

软件 技术 是 一 门 发 展 很 快 的 技术 ,软件 测试 的 方法 也 在 不 断 发 展 。 从 人 工 测试 到 自动 
化 测试 ,从 桌面 应 用 的 测试 到 Web 应 用 的 测试 ,再 到 手机 App 的 测试 .前 端的 测试 。 随 着 
技术 的 发 展 ,开源 软件 测试 工具 已 相当 成 熟 。 我 们 认为 ,软件 测试 课程 教学 的 目的 不 是 教学 
生 如 何 使 用 具体 的 软件 测试 工具 ,而 是 通过 软件 测试 工具 的 教学 ,使 学 生 和 掌握 软件 测试 的 基 
本 知识 和 方法 。 我 们 不 能 保证 学 生 毕 业 后 在 就 业 岗位 一 定 会 用 到 我 们 所 教 的 软件 测试 工 
有 具 ,但 是 ,我 们 可 以 保证 学 生 毕 业 后 一 定 会 用 到 我 们 所 教 的 软件 测试 方法 ,并 且 可 以 选择 合 
适 的 软件 测试 工具 ,很 快 就 能 掌握 软件 测试 工具 的 使 用 。 现 有 教材 选用 开源 软件 测试 工具 
的 很 少 , 这 是 我 们 为 什么 要 编写 这 本 书 的 原因 之 一 。 

随 着 智能 手机 的 普及 ,需要 大 量 手机 App 开发 和 测试 人 才 。 软 件 测试 的 一 些 方法 仍然 
适用 于 手机 App 的 测试 ,但 是 ,由 于 手机 App 的 特殊 性 ,测试 的 关注 点 有 所 不 同 。 需 要 采 
用 更 有 效 的 方法 。 国 内 包含 手机 App 测试 内 容 的 书籍 很 少 ,这 是 我 们 为 什么 要 编写 这 本 书 
的 原因 之 二 。 

1997 年 ,英国 计算 机 协会 信息 系统 考试 委员 会 成 立 了 软件 测试 认证 委员 会 ,随后 ,各 国 
都 建立 了 自己 的 软件 测试 认证 委员 会 。 各 国 的 软件 测试 认证 委员 会 成 立 了 一 个 联盟 国 
际 软件 测试 认证 委员 会 (International Software Testing Qualifications Board. ISTQB). 
CSTQB(Chinese Software Testing Qualifications Board) 是 ISTQB 在 大 中 华 区 (包括 港澳 
台地 区 ) 的 唯一 分 会 ,成 立 于 2006 4 (http://www. cstqb. сп/). ISTQB 的 培训 大 纲 是 软件 
测试 岗位 所 需 知识 ,技能 的 权威 文档 ,不 管 是 否 参加 软件 测试 人 员 认 证 ,对 软件 测试 人 员 都 
有 重要 的 指导 意义 。 就 作者 所 知 , 国 内 涉及 ISTQB 培训 内 容 的 书籍 非常 少 ,这 是 我 们 为 什 
么 要 编写 这 本 书 的 原因 之 三 。 

应 用 型 本 科 院 校 是 指 以 应 用 型 为 办 学 定位 ,而 不 是 以 科研 为 办 学 定位 的 本 科 院 校 。 应 
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用 型 本 科教 育 对 于 满足 我 国 经 济 社会 发 展 , 对 高 层次 应 用 型 人 才 需 要 以 及 推进 我 国 高 等 教 
育 大 众 化 进程 起 到 了 积极 的 促进 作用 。 早 在 2014 年 3 月 ,国家 教育 部 改革 方向 就 已 经 明 
确 : 全 国 普 通 本 科 高 等 院 校 1200 所 学 校 中 ,将 有 600 多 所 逐步 向 应 用 技术 型 大 学 转变 , 转 
型 的 大 学 本 科 院 校正 好 占 高 校 总 数 的 50%。 为 了 落实 应 用 型 本 科 的 改革 目标 ,必须 建设 适 
合 应 用 型 本 科 的 教材 。 因 此 ,我 们 应 该 着 力 于 技术 应 用 的 教学 。 这 是 我 们 为 什么 要 编写 这 
本 书 的 原因 之 四 。 

本 书 内 容 

EPI 11 章 , 其 中 第 1 一 7 章 是 软件 测试 的 基本 内 容 ,第 8 一 11 章 是 软件 测试 专题 内 
容 。 用 作 教材 时 ,教师 可 以 根据 本 校 的 实际 情况 (课时 数 . 相 关 课 程 的 开设 情况 ,学生 素质 
等 ) 灵 活 选择 教学 内 容 。 例 如 ,可 以 选择 1 一 7 章 加 若干 软件 测试 专题 内 容 。 

第 1 章 软件 测试 基础 。 本 章 介绍 软件 测试 的 基础 知识 , 它 是 后 续 各 章 的 基础 ,是 所 有 
读者 必 读 的 一 章 (不 同 的 读者 对 于 后 续 各 章 可 以 按 需 阅读 ,有 些 章节 可 以 重点 阅读 ,有 些 章 
节 可 以 略 读 , 有 些 章节 可 以 略 过 )。 本 章 还 介绍 了 软件 测试 技术 的 发 展 趋势 ,为 软件 测试 人 
员 的 终身 学 习 明 确 了 方向 。 

第 2 章 软件 测试 管理 。 本 章 首先 介绍 软件 测试 管理 的 基本 知识 ,然后 介绍 软件 测试 
管理 工具 TestLink 的 应 用 技能 。 

第 3 章 软件 缺陷 管理 。 本 章 首先 介绍 软件 缺陷 管理 的 基本 知识 ,然后 介绍 软件 缺陷 
管理 工具 Mantis 的 应 用 技能 。 

第 4 章 单元 测试 。 本 章 首先 介绍 单元 测试 的 基本 知识 ,然后 介绍 单元 测试 框架 
JUnit 的 应 用 技能 ,还 介绍 了 白 盒 测试 技术 。 

第 5 章 集成 测试 。 本 章 首 先 介绍 集成 测试 的 基本 知识 ,然后 介绍 Jenkins 的 应 用 
技能 。 

第 6 章 系统 测试 。 本 章 首先 介绍 系统 测试 的 基本 知识 ,然后 介绍 Selenium, Robot 
Framework 的 应 用 技能 ,还 介绍 了 黑 盒 测试 技术 。 

第 7 章 性 能 测试 。 本 章 首先 介绍 性 能 测试 的 基本 知识 ,然后 介绍 JMeter 的 应 用 
技能 。 

第 8 章 安全 性 测试 。 本 章 首先 介绍 安全 性 测试 的 基本 知识 ,然后 介绍 ZAP 的 应 
技能 。 

第 9 章 Spring MVC Web 应 用 测试 。 本 章 首先 介绍 Spring MVC Web 应 用 测试 的 基 
本 知识 ,然后 介绍 Spring MVC Web 应 用 测试 的 方法 。 

第 10 %% Android App 测试 。 本 章 首 先 介绍 Android App 测试 的 基本 知识 ,然后 介绍 
Android App 测试 的 方法 ,还 介绍 了 移动 应 用 测试 工具 Appium 的 使 用 基础 。 

第 11 章 Web 前 端 测试 。 本 章 首先 介绍 前 端 测试 的 基本 知识 ,然后 介绍 前 端 测 试 工 
具 Jasmine、Karma 的 应 用 技能 ,还 介绍 了 前 端 测 试 工具 Jubula 的 使 用 基础 。 

本 书 特色 

本 书 的 主要 特色 如 下 : 

CD 课 证 融合 。 按 照 国际 软件 测试 认证 委员 会 的 软件 测试 人 员 认证 初级 大 纲 选 取 知 识 
点 ,兼顾 当前 软件 测试 岗位 实战 对 技能 的 要 求 ,精心 选择 教学 内 容 。 本 书 配套 的 教学 资源 中 
还 提供 了 三 套 ISTQB 模拟 试卷 。 


1} 
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(2) 开源 自动 化 工具 的 选择 。 选 择 的 开源 自动 化 工具 都 是 企业 .软件 社区 真实 项 目 中 
使 用 的 工具 ,便于 软件 行业 从 业 人 员 自 学 。 

(3) 理论 与 实践 的 紧密 结合 。 从 实战 的 角度 出 发 ,讲解 软件 测试 基本 理论 ,用 理论 指导 
(4) 生动 的 开篇 案例 。 大 部 分 章节 以 与 软件 测试 技术 相关 的 实际 案例 作为 开篇 ,使 得 
对 知识 的 讲解 更 生动 。 

(5) 最 新 的 软件 开发 和 测试 工具 介绍 。 附 录 中 介绍 了 当前 企业 软件 开发 和 测试 的 最 新 
Maven、Docker、Git, 现 有 教材 中 很 少 涉及 这 些 内 容 。 

读者 对 象 

高 等 院 校 计算 机 软件 工程 ,软件 技术 、 计 算 机 应 用 技术 、 软 件 与 信息 服务 等 相关 专业 的 
学 生 , 软 件 行业 从 业 人 员 ( 软 件 测试 人 员 .软件 开发 人 员 、 项 目 经 理 等 ), 参 加 ISTQB 测试 人 
员 认 证 的 备考 者 。 


工具 


作者 联系 方式 

高 科 华 

QQ: 527358657 

Email; khgao@ 126. com 

课程 网 站 : http://121. 15. 218. 198:8080/suite/wv/92375 
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本 章 主要 内 容 

为 什么 需要 软件 测试 
什么 是 软件 测试 

软件 测试 的 基本 原则 
基本 的 测试 过 程 

测试 的 心理 学 

软件 测试 人 员 职 业 道德 

软件 测试 级 别 、 类 型 .技术 和 方法 
软件 测试 工具 

软件 测试 技术 的 发 展 趋势 


2000 4E , 老 沙 应 聘 到 Z 公 司 担任 IT 主管 ,Z 公 司 和 工 软件 公司 联合 为 Z 公 司 开 发 
销售 管理 系统 ,项 目 已 经 进行 2 年 了 , 迟 迟 不 能 交付 给 业务 部 门 使 用 。T 软件 公司 的 软 
件 开 发 人 员 抱怨 Z 公 司 的 用 户 对 销售 管理 系统 的 需求 不 确定 ,经 常 变更 需求 。Z 公司 
的 用 户 抱怨 工 软件 公司 的 软件 开发 人 员 不 了 解 业务 需求 ,不 能 按时 完成 软件 开发 任务 
并 交付 用 户 使 用 。 双 方 的 合作 以 失败 告终 。T 公 司 退出 了 项 目 ,Z 公司 的 软件 开发 人 
员 纷纷 离职 。 

老 沙 花 了 一 个 星期 调研 后 发 现 ,不 是 T 公司 的 软件 开发 人 员 编 程 的 能 力 差 ,也 不 是 Z 
公司 的 用 户 对 系统 太 苛刻 。 而 是 软件 开发 项 目 在 管理 上 存在 问题 ,对 软件 测试 不 够 重视 ,用 
户 在 验收 测试 阶段 才 介 入 软件 系统 的 测试 。 

这 是 作者 亲身 经 历 的 一 个 案例 ,一 个 软件 危机 的 典型 事例 ,一 个 软件 测试 在 软件 开发 过 
程 中 的 重要 性 被 忽视 的 事例 。 

本 章 将 介绍 软件 测试 的 基础 知识 , 它 是 后 续 各 章 的 基础 ,是 所 有 读者 必 读 的 一 章 。 


(1.1 为 什么 需要 软件 测试 


提高 软件 质量 是 软件 工程 的 重要 目标 之 一 。 软 件 质 量 保证 是 重要 的 ,软件 测试 是 软件 
质量 保证 的 重要 内 容 。 
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1.1.1 软件 测试 的 重要 性 
让 我 们 先 来 回顾 一 下 几 个 典型 的 软件 质量 事故 案例 。 
1. 迪士尼 的 狮子 王 游戏 ,1994 一 1995 年 


1994 年 圣诞 节 前 夕 ,迪士尼 公司 发 布 了 第 一 个 面向 儿童 的 多 媒体 光盘 游戏 (狮子 王 童 
话 》。 由 于 迪士尼 公司 的 著名 品牌 和 事先 的 大 力 宣 传 及 良好 的 促销 活动 ,市 场 销 售 情况 相当 
火爆 。 家 长 相当 满意 ,孩子 们 相当 期 待 , 但 结果 相当 出 人 意料 。12 月 26 日 ,圣诞 节 后 的 第 
一 天 ,迪士尼 公司 的 客户 支持 部 电话 开始 响 个 不 停 ,不 断 有 人 咨询 ,抱怨 为 什么 游戏 总 是 安 
装 不 成 功 ,或 没 法 正常 使 用 。 很 快 ,电话 部 门 就 淹没 在 愤怒 家 长 的 责问 声 和 玩 不 成 游戏 孩子 
们 的 器 诉 声 之 中 ,报纸 和 电视 开始 不 断 报道 此 事 。 后 来 发 现 是 系统 兼容 性 的 问题 。 迪 土 尼 
公司 没有 对 当时 市 场 上 的 各 种 PC 机 型 进行 完整 的 系统 兼容 性 测试 ,只 是 在 几 种 PC 机 型 上 
进行 了 相关 测试 。 所 以 ,这 个 游戏 软件 只 能 在 少数 系统 中 正常 运行 ,但 在 大 众 使 用 的 其 他 常 
见 系 统 中 却 不 能 正常 安装 和 和 运行 ,如 图 1. 1 所 示 。 


兼容 性 问题 


图 1.1 狮子 王 游戏 兼容 性 问题 


2. 英特尔 奔腾 浮 点 除法 软件 缺陷 .1994 年 
在 计算 机 的 “计算 器 "程序 中 输入 以 下 算式 : 
(4195835/3145727)x3145727 - 4195835 


答案 是 多 少 呢 ? 不 用 “计算 器 ?程序 你 也 能 很 快 回答 正确 的 答案 是 0。1994 年 12 Я 30 H, 
美国 弗吉尼亚 州 Lynchburg 大 学 的 Thomas R. Nicely 博士 在 他 的 奔腾 PC 上 做 除法 实验 时 
记录 了 一 个 意 想 不 到 的 结果 ,上 述 算式 答案 竟然 不 是 0。 他 把 发 现 的 问题 放 到 互联 网 上 , 随 
后 引发 了 一 场 风暴 。 成 千 上 万 的 人 发 现 了 同样 的 问题 ,以 及 其 他 得 出 错误 结果 的 情形 。 万 
幸 的 是 ,这 种 情况 很 少见 ,仅仅 在 进行 精度 要 求 很 高 的 数学 科学 和 工程 计算 中 才 会 发 生 。 
大 多 数 进行 财会 管理 和 日 常 应 用 的 用 户 根本 不 会 遇 到 此 类 问题 。 这 是 因为 当时 英特尔 生产 
的 奔腾 处 理 器 芯片 中 除法 运算 的 一 个 小 缺陷 引起 的 ,如 图 1.2 所 示 。 
这 个 故事 中 重要 的 不 是 软件 缺陷 ,而 是 英特尔 解决 问题 的 方式 : 
° 他 们 的 软件 测试 工程 师 在 芯片 发 布 之 前 进行 内 部 测试 时 已 经 发 现 了 这 个 问题 。 英 
特 尔 的 管理 层 认为 这 没有 严重 到 要 修正 。 
。 当 软 件 缺 陷 被 用 户 发 现时 ,英特尔 通过 新 闻 发 布 和 公开 声明 试图 掩饰 这 个 问题 的 严 
重 性 。 
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。 受到 压力 时 ,英特尔 承诺 更 换 有 问题 的 芯片 ,但 要 求 用 户 必 须 证 明 自 己 受 到 软件 缺 
陷 的 影响 。 
与 论 因 此 而 哗然 。 互 联网 新 闻 组 充斥 着 愤怒 的 客户 要 求 英特尔 解决 问题 的 呼声 。 最 
后 ,英特尔 为 自己 处 理 软件 缺陷 的 行为 道 次 ,并 拿 出 4 亿美 元 支付 更 换 芯 片 的 费用 。 现 在 英 
特 尔 在 官方 网 站 上 会 及 时 报告 已 发 现 的 问题 ,并 认真 查看 用 户 在 互联 网 新 闻 组 上 的 反馈 
意见 。 


intel, 


pentiume 


ооооооо о, 
Nm mae Ral 
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图 1.2 英特尔 奔腾 浮 点 除法 软件 缺陷 


з. 美国 航天 局 火星 基地 “登陆 者 号 "探测 器 ,1999 年 


1999 4E 12 月 3 日 ,“ 登 陆 者 号 ”探测 器 在 试图 登陆 火星 表面 的 时 候 失 踪 了 。 经 调查 认 
定 出 现 故障 的 原因 极 可 能 是 一 个 数据 位 被 意外 置 位 (为 什么 不 在 内 部 测试 的 时 候 发 现 ?) 。 
“登陆 者 号 ?探测 器 首先 撑 开 三 条 腿 ,然后 实施 着 陆 。 尽 管 “登陆 者 号 "探测 器 经 过 了 多 个 小 
组 测试 。 其 中 一 个 小 组 测试 探测 器 的 腿 撑 开 的 过 程 , 另 一 个 小 组 测试 此 后 的 着 陆 过 程 。 前 
一 个 小 组 不 去 注意 着 陆 数据 位 是 否 置 位 ,后 一 个 小 组 总 是 在 开始 测试 之 前 复位 计算 机 、 清 除 
数据 位 。 双 方 独立 都 做 得 很 好 ,但 是 没有 很 好 地 协调 。 结 果 没 有 发 现 这 两 个 过 程 衔 接 时 的 
问题 ,这 个 问题 极 有 可 能 导致 探测 器 下 坠 1800 米 后 冲 向 地 面 ,被 撞 成 碎片 ,如 图 1. 3 所 示 。 


图 1. 3 “登陆 者 号 ”探测 器 失踪 


№ 
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4. 爱国 者 导弹 防御 系统 .1991 年 


美国 爱国 者 导弹 防御 系统 首次 被 用 在 第 一 次 海湾 战争 对 抗 伊拉克 飞毛腿 导弹 的 防御 作 
战 中 ,总 体 效果 相当 不 错 ,赢得 了 各 界 的 赞誉 。 但 它 还 是 有 几 次 失利 ,没有 成 功 拦截 伊拉克 
飞毛腿 导弹 。 其 中 一 枚 在 沙特 阿拉 伯 的 多 喻 爆炸 的 飞毛腿 导弹 造成 28 名 美国 士兵 死亡 。 
分 析 专家 发 现 , 拦 截 失败 的 症结 在 于 一 个 软件 缺陷 。 当 爱国 者 导弹 防御 系统 的 时 钟 累 计 运 
行 超过 14 小 时 后 ,系统 的 跟踪 系统 就 不 准确 了 。 在 多 喻 袭击 战 中 ,爱国 者 导弹 防御 系统 运 
行 时 间 已 经 累计 超过 100 多 个 小 时 ,显然 那 时 系统 的 跟踪 系统 已 经 很 不 准确 ,从 而 造成 这 种 
结果 ,如 图 1.4 所 示 。 


RAMEE 
ek 
° ° ° 


图 1.4 系统 时 钟 误差 积累 


5. 千年 虫 问题 ,1974 年 


20 世纪 70 年 代 某 个 程序 员 为 公司 设计 开发 工资 系统 ,当时 使 用 的 计算 机 存储 空间 很 
小 ,人 迫使 他 尽量 节省 每 一 个 字 节 ,他 将 自己 的 程序 压缩 得 比 其 他 人 都 小 ,并 引 以 为 豪 。 他 使 
用 的 方法 之 一 是 把 4 位 数 年 份 缩减 为 2 位 数 ( 例 如 
1974 直接 用 74 表示 )。 因 为 工资 系统 非常 依赖 日 期 的 
处 理 , 所 以 他 需要 节省 大 量 昂贵 的 存储 空间 。 他 简单 
地 认为 只 有 在 到 达 2000 年 时 ,程序 开始 计算 00,01 这 
样 的 年 份 时 问题 才 发 生 。 而 且 他 认为 那 以 后 系统 肯定 
就 升级 了 ,现在 可 以 忽略 它 。 结 果 那 一 天 到 来 了 ,而 他 
编写 的 这 一 道 程序 还 在 使 用 中 ,但 这 位 程序 员 已 经 退 
KT , 谁 也 不 会 想到 如 何 深入 到 程序 检查 2000 年 兼容 
问题 ,更 不 用 说 修改 了 。20 世纪 末 作 者 就 职 于 某 央企 ， 
为 了 应 对 千年 虫 问题 花费 了 不 少 精 力 。 据 估计 ,世界 
图 1.5 千年 虫 问题 各 地 为 了 消灭 千年 虫 问题 ,迎接 新 世纪 的 到 来 花费 了 

数 千 亿美 元 ,如 图 1.5 所 示 。 


6. 12306 火车 票 网 上 订 票 系统 ,2012 一 2014 年 


国内 12306 铁道 部 火车 票 网 上 订 票 系统 历时 两 年 研发 成 功 ,耗资 3 亿 元 人 民 币 , 于 
2011 年 6 月 12 日 投入 运行 。2012 年 1 月 8 日 春运 启动 .9 日 网 站 单 击 量 超过 14 亿 次 ,系统 
出 现 网 站 崩溃 、 登 录 缓 慢 、 无 法 支付 \ 扣 钱 不 出 票 等 严重 问题 。2012 年 9 月 20 日 ,由 于 正 处 
中 秋 和 “十 一 ”黄金 周 , 网 站 日 单 击 量 达到 14.9 亿 次 ,发 售 客票 超过 当年 春运 最 高 值 , 再 次 出 
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现 网 络 拥堵 .重复 排队 等 现象 。 其 故障 的 根本 原因 在 于 系统 架构 规划 以 及 客票 发 放 机 制 存 
在 缺陷 ,无 法 支持 如 此 大 并 发 量 的 交易 。 

2014 年 春运 火车 票 发 售 期 间 , 由 于 网 站 对 身份 证 信息 缺乏 审核 ,用 虚假 的 身份 证 号 可 
直接 购 票 ,黄牛 利用 该 漏洞 倒 票 。 另 外 ,在 线 售 票 网 站 还 曝 出 大 规模 串 号 、 购 票 日 期 穿越 等 
漏洞 ,如 图 1.6 所 示 。 


图 1.6 12306 火车 票 网 上 订 票 系统 性 能 问题 


7. CSDN 和 天 涯 网 用 户 账号 泄密 事件 ,2011 年 


2011 年 12 月 21 日 ,黑客 在 网 上 公开 了 知名 程序 员 网 站 CSDN 的 用 户 数 据 库 ,高达 600 
多 万 个 明文 的 注册 邮箱 账号 和 密码 遭 到 曝光 和 外 泄 , 成 为 中 国 互联 网 历史 上 一 次 具有 深远 
意义 的 网 络 安全 事故 。 

CSDN 的 密码 外 泄 后 ,事件 持续 发 酵 ,天 涯 、 多 玩 等 网 站 相继 被 噪 用户 数 据 遭 泄密 。 天 
涯 网 于 12 月 25 Н Rt BOKE Pe ICME 4000 万 用 户 隐 私 遭 到 黑客 泄露 ,如 图 1.7 所 示 。 


8. 高 铁 动车 追尾 事件 ,2011 年 


2011 年 7 月 23 日 20 时 30 分 05 秒 , 甬 温 线 浙江 省 温州 市 境内 ,由 北京 南 站 开 往 福州 站 
的 D301 次 列车 与 杭州 站 开 往 福州 南 站 的 D3115 次 列车 发 生动 车 组 列车 追尾 事故 。 此 次 事 
故 已 确认 共有 六 节 车 厢 脱 轨 。 造 成 40 人 死亡 .172 人 受伤 ,中 断 行车 32 小 时 35 分 ,直接 经 
济 损失 19 371. 65 万 元 。 

“7。23?” 和 甬 温 线 特 别 重 大 铁路 交通 事故 是 一 起 因 列 控 中 心 设备 存在 严重 设计 缺陷 .系统 
上 道 使 用 审查 把 关 不 严 、 和 雷击 导致 设备 故障 后 应 急 处 置 不 力 等 因素 造成 的 责任 事故 ,如 
图 1.8 所 示 。 

在 当今 社会 ,软件 系统 越 来 越 成 为 生活 中 不 可 或 缺 的 一 部 分 ,包括 从 商业 应 用 (比如 银 
行 系统 ) 到 消费 产品 (比如 汽车 ) 的 各 个 领域 。 然 而 ,很 多 人 都 有 这 样 的 经 历 : 软件 并 没有 
按照 预期 进行 工作 。 软件 的 不 正确 执行 可 能 会 导致 许多 问题 ,包括 资金 .时 间 和 商业 信誉 等 
的 损失 ,甚至 导致 人 员 的 伤亡 。 

软件 评估 和 测试 的 成 本 占 软件 开发 总 成 本 (时 间 和 资金 ) 的 25% — 50 94 ,软件 测试 是 软 
件 开发 活动 的 重要 组 成 部 分 。 软 件 测试 在 软件 开发 过 程 中 的 重要 作用 越 来 越 受 到 更 多 人 的 
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1.7 CSDN 和 天 涯 网 用 户 账号 泄密 事件 


1.8 高 铁 动车 追尾 事件 
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1.1.2 引起 软件 缺陷 的 原因 


所 有 的 人 都 会 犯错 误 (error，mistake) 。 因 此 在 由 人 设计 的 程序 代码 或 文档 中 也 会 引 
ARIA (defect. fault, bug)。 当 存在 缺陷 的 代码 被 执行 时 ,系统 就 可 能 无 法 实现 期 望 的 功 
能 (或 者 实现 了 未 期 望 的 功能 ) ,从 而 引起 软件 失效 (failure)。 虽 然 在 软件 、 系 统 或 文档 中 的 
缺陷 可 能 会 引起 失效 ,但 并 非 所 有 的 缺陷 都 一 定 会 引起 软件 失效 。 

产生 缺陷 的 原因 是 多 种 多 样 的 : 人 们 本 身 容易 犯错 误 、 时 间 的 压力 、 复 杂 的 代码 、 复 杂 
的 系统 架构 .技术 的 革新 以 及 /或 者 许多 系统 之 间 的 交互 等 。 

失效 也 可 能 是 由 于 环境 条 件 引 起 的 ,例如 ,辐射 .电磁 场 和 污染 等 都 有 可 能 引起 固件 中 
的 故障 ,或 者 由 于 硬件 环境 的 改变 而 影响 软件 的 执行 。 

引起 软件 缺陷 的 原因 是 多 方面 的 ,常见 的 原因 有 : 

* 软件 需求 规格 说 明 书 编写 的 不 全 面 ` 不 完整 ,不 准确 ,而 且 经 常 更 改 。 

。 软件 设计 人 员 不 能 正确 理解 软件 需求 规格 说 明 书 。 

。 软件 设计 说 明 书 存在 问题 。 

* 编程 人 员 不 能 正确 理解 软件 设计 说 明 。 

° 编程 过 程 中 产生 的 错误 。 

。 开发 过 程 缺 乏 有 效 的 沟通 。 

。 软件 复杂 度 越 来 越 高 。 

* 项 目 进度 的 压力 。 

。 不 重视 开发 文档 。 

* 软件 开发 工具 本 身 隐 藏 的 问题 。 
没有 进行 有 效 的 软件 测试 。 
按照 软件 开发 活动 ,分 析 软 件 缺陷 产生 的 原因 ,可 以 用 表 1. 1 描述 。 

Rid 软件 缺陷 产生 的 原因 


基本 活动 я & m Hm 缺陷 性 质 
对 系统 的 认识 不 清楚 
对 用 户 需 求 理 解 有 误 
需求 不 符合 实际 用 户 需 求 表达 不 准确 
需求 分 析 与 用 户 需求 不 一 至 需求 变更 需求 规格 说 明 缺 陷 
评审 不 够 

配置 管理 不 严格 

对 用 户 需求 与 需求 规格 说 明理 
解 有 误 

对 编码 有 关 技 术 和 约束 认识 
不 符合 用 户 需求 不 够 

软件 设计 不 符合 需求 规格 说 明 设计 不 当 设计 缺陷 
容错 能 力 不 够 设计 说 明 有 误 
需求 管理 有 缺陷 
评审 不 够 
配置 管理 不 严格 
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аж 
基本 活动 я * ж HB 缺陷 性 质 


对 设计 说 明理 解 不 够 
所 用 技术 不 当 
偶然 失误 

er 

编码 不 符合 设计 要 求 需求 管理 有 缺陷 编码 缺陷 
评审 不 够 
配置 管理 不 严格 


测试 设计 有 误 
测试 资源 不 名 
| BLM AOR BER 测试 管理 欠缺 | 
нк 残留 缺陷 太 多 需求 管理 有 缺陷 тив 
WERE 

配置 管理 不 严格 


令 人 感到 奇怪 的 是 ,我 们 发 现 大 多 数 软件 缺陷 不 是 因为 编程 错误 而 产生 的 。 从 小 程序 
到 大 项 目的 无 数 研究 得 出 了 一 个 一 致 的 结论 : 导致 软件 缺陷 的 根本 原因 在 于 需求 规格 说 明 
扩 。 软 件 缺 陷 的 原因 占 比 如 图 1. 9 所 示 。 


软件 缺陷 的 原因 


图 1.9 软件 缺陷 产生 的 原因 


1.1.3 软件 测试 和 软件 质量 


软件 测试 是 改进 软件 质量 的 重要 手段 ,但 是 软件 测试 不 是 软件 质量 保证 。 软 件 测试 通 
过 识别 软件 缺陷 并 修改 软件 缺陷 提高 了 软件 质量 。 但 是 ,软件 质量 保证 不 仅仅 是 消除 软件 
测试 中 发 现 的 软件 失效 。 按 照 评 价 软件 质量 的 国际 标准 ISO9126 软件 质量 模型 ,软件 质量 
有 六 大 特性 : 功能 性 、 可 靠 性 、 易 用 性 效率 、 可 维护 性 、 可 移植 性 。 这 些 特性 可 以 细 分 为 若 
干 子 特性 。 国 际 标准 组 织 于 2011 年 3 月 发 布 了 ISO/IEC25010 软件 质量 评价 标准 ,ISO/ 
IEC25010 描述 了 两 种 质量 模型 : 使 用 质量 模型 和 产品 质量 模型 。 共 有 13 大 特性 和 43 个 
子 特性 ,如 表 1.2 所 示 。 
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表 1.2 ISO/IEC25010 使 用 质量 模型 和 产品 质量 模型 


特 性 f 特 性 

有 效 性 有 效 性 

效率 效率 
使 用 质量 满意 度 有 益 、 可 信 、 有 趣 、 和 舒适 

低 风 险 降低 经 济 风险 、 降 低 健康 和 安全 风险 、 降 低 环境 风险 

周 境 覆盖 周 境 完 整 性 、 灵 活性 

功能 适合 性 功能 完整 性 、 功 能 正确 性 、 功 能 适当 性 

性 能 效率 时 间 特 性 、 资 源 利 用 率 、 容 量 

兼容 性 НЕН. ЗЕ 

易 用 性 适合 性 、 可 辨认 性 .易学 习性 、 易 操作 性 、 用 户 错误 防 
产品 质量 御 、 用 户 界面 美观 、 可 访问 性 

可 靠 性 成 熟 性 ,可 用 性 ,容错 性 \ 易 恢复 性 

安全 性 保密 性 ,完整 性 ,不 可 否认 性 、 可 归 责 性 、 真 实 性 

可 维护 性 模块 性 \ 可 复 用 性 、 易 分 析 性 \ 易 修改 性 、 易 测试 性 

可 移植 性 适应 性 \ 易 安装 性 、 易 替换 性 


ISO/IEC25012 描述 了 数据 质量 模型 。 共 有 15 个 质量 特性 ,如 表 1.3 所 示 。 
表 1.3 ISO/IEC25012 数据 质量 模型 


数据 质量 


ət 
= 


依赖 系统 的 


人 | 人 | 人 | 人 | 人 《人 人 | 人 | 人 | 人 | 人 | 人 


人 | 人 | 人 | 人 | 人 | 人 人 | 人 | 人 | 人 


使 用 质量 模型 .产品 质量 模型 和 数据 质量 模型 构成 了 软件 质量 模型 框架 。 这 些 模 型 提 
供 了 一 套 与 广泛 利益 相关 者 有 关 的 质量 特性 ,如 软件 开发 商 、 系 统 集成 商 \ 需 方 、 拥 有 者 、 维 
护 人 员 、 承 包 商 、 质 量 保证 和 质量 控制 的 专业 人 士 和 用 户 。 

这 些 模型 的 全 套 质量 特性 不 是 与 每 一 个 利益 相关 者 都 有 关 。 尽 管 如 此 ,每 一 类 利益 相 
关 者 应 在 审查 和 考虑 各 模型 的 质量 特性 关联 之 前 完成 质量 特性 的 设置 ,例如 建立 产品 和 系 
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统 性 能 需求 或 评估 标准 。 

软件 测试 和 软件 质量 保证 都 贯穿 了 整个 软件 开发 生命 周期 ,好 的 测试 可 以 有 效 地 提高 
软件 质量 ,但 是 软件 质量 保证 和 软件 测试 是 软件 质量 工程 的 两 个 不 同 层面 的 工作 。 

软件 生命 周期 每 一 阶段 中 都 应 包含 软件 测试 ,从 静态 测试 到 动态 测试 ,要 求 检验 每 一 个 
阶段 的 成 果 是 否 符合 质量 要 求 和 达到 定义 的 目标 , 尽 可 能 早 地 发 现 错误 并 加 以 修正 。 如 果 
不 在 早期 阶段 进行 测试 ,错误 的 不 断 扩散 、 积 累 常 常会 导致 最 后 成 品 测试 的 巨大 困难 、 开 发 
周期 的 延长 .开发 成 本 的 剧 增 等 等 。 软 件 测试 与 软件 质量 的 相同 点 在 于 二 者 都 是 贯穿 整个 
软件 开发 生命 周期 的 。 软 件 质量 保证 的 职能 是 向 管理 层 提供 正确 的 可 视 化 的 信息 ,从 而 促 
进 与 协助 流程 改进 。 软 件 质 量 保证 还 充当 测试 工作 的 指导 者 和 监督 者 ,帮助 软件 测试 建立 
质量 标准 ,测试 过 程 评审 方法 和 测试 流程 ,同时 通过 跟踪 、 审 计 和 评审 ,及 时 发 现 软件 测试 过 
程 中 的 问题 ,从 而 帮助 改进 测试 或 整个 开发 的 流程 等 。 因 此 ,有 了 软件 质量 保证 ,软件 测试 
工作 就 可 以 被 客观 地 检查 与 评价 ,同时 也 可 以 协助 测试 流程 的 改进 。 而 软件 测试 为 软件 质 
量 保 证 提供 数据 和 依据 ,帮助 软件 质量 保证 更 好 地 了 解 质量 计划 的 执行 情况 、 过 程 质量 、 产 
品质 量 和 过 程 改进 进展 ,从 而 使 软件 质量 保证 更 好 地 做 好 下 一 步 工作 。 

软件 测试 人 员 的 一 项 重要 任务 是 提高 软件 质量 ,但 不 等 于 说 软件 测试 人 员 就 是 软件 质 
量 保证 人 员 ,因为 测试 只 是 质量 保证 工作 中 的 一 个 环节 。 软 件 质量 保 证 人 员 和 软件 测试 人 
员 在 软件 质量 工程 中 分 工 合作 。 软 件 质量 保证 的 重要 工作 是 通过 预防 ,检查 与 改进 来 保证 
软件 质量 。 虽 然 在 软件 质量 保证 的 活动 中 也 有 一 些 软件 测试 活动 ,但 所 关注 的 是 软件 质量 
的 检查 与 测量 。 软 件 质量 保证 工作 是 软件 生命 周期 的 管理 以 及 验证 软件 是 否 满足 规定 的 质 
量 和 用 户 的 需求 ,因此 主要 着 眼 于 软件 开发 活动 中 的 过 程 . 步 又 和 产物 ,而 不 是 对 软件 进行 
前 析 , 找 出 问题 或 评估 。 软 件 测试 虽然 也 与 开发 过 程 紧密 相关 ,但 关心 的 不 是 过 程 的 活动 ， 
而 是 对 过 程 的 产物 以 及 开发 出 的 软件 进行 剖析 。 软 件 测试 人 员 要 “执行 "软件 ,对 过 程 中 的 
产物 一 一 开发 文档 和 源 代码 进行 走 查 ,以 找 出 问题 ,报告 质量 。 对 测试 中 发 现 的 问题 的 分 
析 、 追 踪 与 回归 测试 也 是 软件 测试 中 的 重要 工作 ,因此 软件 测试 是 保证 软件 质量 的 一 个 重要 
环节 。 

对 软件 系统 和 文档 进行 严格 的 测试 ,可 以 减少 软件 系统 在 运行 环境 中 的 风险 ,如果 在 软 
件 正 式 发 布 之 前 发 现 和 修正 了 缺陷 ,就 可 以 提高 软件 系统 的 质量 。 

进行 软件 测试 也 可 能 是 为 了 满足 合同 或 法 律 法 规 的 要 求 ,或 者 是 为 了 满足 行业 标准 的 
要 求 。 

可 以 根据 测试 中 所 发 现 的 缺陷 ,对 软件 功能 和 非 功 能 性 需求 以 及 特性 (例如 ,可 靠 性 、 可 
用 性 ,效率 、 可 维护 性 和 可 移植 性 ) 进 行 度量 ,从 而 评估 软件 质量 。 

当 测 试 发 现 很 少 或 者 没有 发 现 缺 陷 的 时 候 ,测试 就 会 帮助 树立 对 于 软件 质量 的 信心 。 
一 个 设计 合理 的 测试 过 程 完成 并 顺利 通过 ,可 以 降低 整个 系统 存在 问题 的 风险 。 若 对 测试 
过 程 中 发 现 的 缺陷 进行 了 修正 , 则 软件 系统 的 质量 就 会 提高 。 

我 们 应 该 从 以 前 的 项 目 中 吸取 经 验 教训 。 通 过 分 析 在 其 他 项 目 中 发 现 的 缺陷 和 引起 缺 
陷 的 根本 原因 ,可 以 改进 软件 开发 过 程 。 过 程 的 改进 反 过 来 可 以 预防 相同 的 缺陷 再 次 发 生 ， 
从 而 提高 以 后 系统 的 质量 。 这 是 质量 保证 工作 的 一 方面 。 

测试 应 该 作为 开发 过 程 中 质量 保证 工作 的 不 可 或 缺 的 一 部 分 (与 开发 标准 、 培 训 和 缺陷 
分 析 一 样 )。 
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在 判断 测试 是 否 足够 时 ,需要 考虑 下 面 的 因素 : 风险 (包括 技术 风险 、 商 业 产品 风险 和 
项 目 风险 等 ) 以 及 项 目 在 时 间 和 预算 上 的 限制 等 。 

为 了 进入 下 一 个 开发 过 程 ,或 将 系统 交付 给 用 户 ,测试 需要 给 利益 相关 者 提供 足够 的 信 
息 , 帮 助 他 们 决定 是 否 发 布 被 测 软 件 或 系统 。 


(.2 什么 是 软件 测试 


老 沙 在 分 析 Z 公司 的 项 目 失败 的 原因 时 , 问 Z 公司 的 IT 人 员 :“ 你 们 进行 了 软件 测试 
吗 ?”Z 公司 的 IT 人 员 回 答 :“ 我 们 进行 了 软件 测试 ,我 们 项 目 组 的 成 员 一 边 开发 ,一 边 测 
试 ,” 他 们 真 的 做 了 软件 测试 吗 ? 我 们 承认 他 们 做 了 调试 ,但 调试 不 等 于 软件 测试 。 


1.2.1 软件 测试 的 基本 概念 


乙 软 件 公 司 为 客户 甲 公司 开发 了 一 个 图 书 管理 系统 软件 , 甲 公司 的 小 明 在 验收 软件 时 
发 现 了 软件 的 一 个 功能 与 甲 公司 的 要 求 不 一 致 (软件 失效 )。 小 明 向 乙 公司 反馈 了 他 的 发 
现 , 乙 公 司 的 小 强 检查 软件 代码 后 发 现 是 软件 开发 人 员 不 小 心 写 错 了 一 段 代码 (软件 错误 ) 。 
乙 公 司 的 开发 人 员 小 牛 在 修改 这 段 代 码 的 过 程 中 遇 到 了 一 些 异 常 ( 软 件 异 常 ) 。 经 过 分 析 处 
理 终于 解决 了 这 个 软件 缺陷 (软件 缺陷 ) 。 

上 述 案例 为 我 们 引入 了 软件 测试 中 的 几 个 基本 概念 。 

失效 : 组 件 / 系 统 与 预期 的 交付 、 服 务 或 结果 存在 的 偏差 。 

异常 : 与 基于 需求 文档 \ 设 计 文档 、 用 户 文档 、 标 准 或 用 户 期 望 和 经 验 所 得 出 的 预期 之 
间 出 现 的 任何 偏差 情况 ,都 可 称 为 异常 。 异 常 可 在 且 不 限于 在 下 面 的 过 程 中 被 识别 : 评审 、 
测试 分 析 、 编 译 、 软 件 产品 或 应 用 文档 的 使 用 等 情形 。 

缺陷 /Bug: 组 件 或 系统 中 会 导致 组 件 或 系统 无 法 执行 其 必需 功能 的 瑕 辛 , 例 如 ,错误 的 
语句 或 变量 定义 。 如 果 在 组 件 或 系统 运行 中 遇 到 缺陷 ,可 能 会 导致 失效 。 

错误 : 人 为 因素 产生 不 正确 结果 的 行为 。 

1983 年 ,IEEE 给 出 的 软件 测试 的 定义 是 :“ 软 件 测试 是 使 用 人 工 或 自动 的 手段 来 运行 
或 测定 某 个 软件 系统 的 过 程 , 其 目的 在 于 检验 它 是 否 满足 规定 的 需求 或 弄 清 楚 预 期 结果 与 
实际 结果 之 间 的 差别 。” 

软件 测试 的 定义 是 随 着 人 们 认识 的 提高 逐渐 完善 的 ,在 不 同 的 时 期 ,人 们 对 软件 测试 有 
不 同 的 定义 。 在 一 般 人 的 理解 中 ,测试 活动 只 包含 了 运行 测试 ,也 就 是 执行 软件 。 但 实际 上 
这 只 是 测试 的 一 部 分 ,而 不 是 测试 的 所 有 活动 。 

测试 活动 包含 了 测试 执行 之 前 和 之 后 的 一 些 活动 ,包括 计划 和 控制 .选择 测试 条 件 、 设 
计 和 执行 测试 用 例 、 检 查 测试 结果 评估 出 口 准则 、 报 告 测试 过 程 及 被 测 系 统 , 在 一 个 测试 阶 
段 完 成 后 要 进行 测试 结束 或 总 结 工作 。 测 试 同时 也 包括 文档 的 评审 (包括 源 代码 ) 和 执行 静 
态 分 析 。 

动态 测试 和 静态 测试 这 两 种 手段 都 可 以 达到 相似 的 目标 , 即 以 提供 信息 来 改进 被 测试 
软件 系统 的 质量 ,以 及 改善 开发 和 测试 的 过 程 。 
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软件 测试 的 主要 目标 是 : 

+ 增加 对 质量 的 信心 。 

° 为 决策 提供 信息 。 

° 预防 缺陷 。 

首先 ,测试 的 目标 是 以 最 少 人 力 、 物 力 和 时 间 找 出 软件 中 洪 在 的 各 种 错误 和 缺陷 ,通过 
修正 错误 和 缺陷 提高 软件 质量 ,规避 软件 发 布 后 由 于 潜在 的 软件 缺陷 和 错误 造成 的 后 果 所 
带 来 的 商业 风险 。 

其 次 ,没有 发 现 错误 的 测试 也 是 有 价值 的 ,完整 的 测试 是 评定 软件 质量 的 一 种 方法 ,可 
以 建立 人 们 对 软件 质量 的 信心 。 

软件 测试 并 不 仅仅 是 为 了 要 找 出 错误 。 通 过 分 析 错 误 产生 的 原因 和 错误 的 分 布 特征 ， 
可 以 帮助 项 目 管理 者 发 现 当前 所 采用 的 软件 过 程 的 缺陷 ,以 便 改进 。 同 时 ,这 种 分 析 也 能 帮 
助 我 们 设计 出 有 针对 性 的 检测 方法 ,改善 测试 的 有 效 性 。 

测试 的 另 一 个 目标 是 预防 缺陷 。 虽 然 通 过 软件 测试 不 能 发 现 软件 存在 的 所 有 缺陷 ,但 
我 们 可 以 尽 可 能 发 现 潜在 的 缺陷 。 有 效 的 软件 测试 应 该 能 发 现 软件 存在 的 严重 缺陷 (例如 ， 
影响 软件 正常 使 用 的 缺陷 ,会 导致 生命 财产 损失 的 缺陷 ) 。 

值得 注意 的 是 ,软件 测试 不 能 表明 软件 中 不 存在 错误 , 它 只 能 说 明 软 件 中 存在 错误 。 

在 软件 生命 周期 的 早期 进行 测试 设计 的 思维 过 程 和 活动 (通过 测试 设计 来 检验 测试 依 
据 ), 可 以 避免 将 缺陷 引入 代码 。 对 文档 的 评审 (例如 需求 文档 ) 并 识别 和 解决 问题 也 有 助 于 
防止 在 代码 中 出 现 缺 陷 。 

在 不 同 的 测试 阶段 ,需要 考虑 不 同 的 测试 目标 。 比 如 ,在 开发 测试 中 ,如 组 件 测试 .集成 
测试 和 系统 测试 等 ,测试 的 主要 目标 是 尽 可 能 地 发 现 失效 ,从 而 识别 和 修正 尽 可 能 多 的 缺 
陷 。 在 验收 测试 中 ,测试 的 主要 目标 是 确认 系统 是 否 按照 预期 工作 ,是 建立 满足 了 需求 的 信 
心 。 而 在 有 些 情况 下 ,测试 的 主要 目标 是 对 软件 的 质量 进行 评估 (不 是 为 了 修正 缺陷 ), 从 而 
为 利益 相关 者 提供 这 样 的 信息 : 在 给 定 的 时 间 点 发 布 系 统 版 本 可 能 存在 的 风险 。 而 维护 测 
试 通常 是 为 了 验证 在 开发 过 程 中 的 软件 变更 是 否 引 入 新 的 缺陷 。 在 运行 测试 阶段 ,测试 的 
主要 目标 是 为 了 评估 系统 的 特征 ,比如 可 靠 性 或 可 用 性 等 。 

调试 和 测试 是 两 个 不 同 的 概念 。 动 态 测试 可 以 发 现 由 于 软件 缺陷 引起 的 失效 。 而 调试 
是 一 种 发 现 . 分 析 、 清 除 引起 失效 原因 的 开发 活动 ,随后 由 测试 员 进行 的 再 测试 是 为 了 确认 
修改 的 代码 已 经 解决 了 失效 问题 。 每 个 活动 的 职责 是 截然 不 同 的 , 即 测试 员 进 行 测试 ,开发 
人 员 进 行 调试 。 


1.2.2 软件 测试 的 发 展 历史 


л 软件 测试 的 发 展 一 共 经 历 了 五 个 重要 时 期 : 

1957 年 之 前 调试 为 主 (Debugging Oriented) 。 
* 1957—1978 年 一 一 证 明 为 主 (Demonstration Oriented). 
1979—1982 年 一 一 破坏 为 主 (Destruction Oriented) 。 
1983—1987 年 一 一 评估 为 主 (Evaluation Oriented) 。 
* 1988 年 至 今 一 一 预防 为 主 (Prevention Oriented) 。 
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1. 调试 为 主 


20 世纪 50 年 代 , 计 算 机 刚 诞生 不 久 , 只 有 科学 家 级 别 的 人 才 会 去 编程 ,需求 和 程序 本 
身 也 远 远 没有 现在 这 么 复杂 多 变 , 相 当 于 开发 人 员 一 人 承担 需求 分 析 、 设 计 、 开 发 ,测试 等 所 
有 工作 ,当然 也 不 会 有 人 去 区 分 调试 和 测试 。 然 而 严谨 的 科学 家 们 已 经 在 开始 思考 “怎么 
知道 程序 满足 了 需求 ?这 类 问题 了 。 


2. 证 明 为 主 


1957 年 ,Charles Baker 在 他 的 一 本 书 中 对 调试 和 测试 进行 了 区 分 。 

W Debug) : 确保 程序 做 了 程序 员 想 它 做 的 事情 。 

Wik (Testing) : 确保 程序 解决 了 它 该 解决 的 问题 。 

这 是 软件 测试 史上 一 个 重要 的 里 程 碑 , 它 标志 着 测试 终于 自立 门户 、 师 出 有 名 了 。 

当时 计算 机 应 用 的 数量 、 成 本 和 复杂 性 都 大 幅度 提升 , 随 之 而 来 的 经 济 风险 也 大 大 增 
加 ,测试 就 显得 很 有 必要 了 ,这 个 时 期 测试 的 主要 目的 就 是 确认 软件 是 满足 需求 的 ,也 就 是 
我 们 常 说 的 "做 了 该 做 的 事情 ”。 


3. 破坏 为 主 


1979 年 《软件 测试 的 艺术 》(The Art of Software Testing ) 第 一 版 问世 ,这 本 书 是 测 
试 界 的 经 典 之 作 。 书 中 给 出 了 软件 测试 的 经 典 定义 : 


The process of executing a program with the intent of finding errors. 


测试 是 为 发 现 错误 而 执行 程序 的 过 程 。 
这 个 观点 较 之 前 证 明 为 主 的 思路 ,是 一 个 很 大 的 进步 。 我 们 不 仅 要 证 明 软 件 做 了 该 做 
的 事情 ,还 要 保证 它 没 做 不 该 做 的 事情 ,这 会 使 测试 更 加 全 面 , 更 容易 发 现 问题 。 


4. 评估 为 主 


1983 年 ,美国 国家 标准 局 (National Bureau of Standards) 发 布 “Guideline for Lifecycle 
Validation, Verification and Testing of Computer Software”, 也 就 是 我 们 常 说 的 VV&T。 
VV&T 提出 了 测试 界 很 有 名 的 两 个 名 词 : 验证 (Verification) 和 确认 (Validation) 

Verification: Are we building the product right? 

Validation: Are we building the right product? 

人 们 提出 了 在 软件 生命 周期 中 使 用 分 析 、 评 审 、 测 试 来 评估 软件 产品 的 理论 。 软 件 测试 
工程 在 这 个 时 期 得 到 了 快速 发 展 : 

。 出 现 测试 经 理 (test manager) ,测试 分 析 师 (test analyst) 等 岗位 。 

。 开展 正式 的 国际 性 软件 测试 会 议和 活动 。 

。 出 版 大 量 软 件 测试 刊物 。 

° 发 布 相 关 国 际 标准 。 

以 上 种 种 都 预示 着 : 软件 测试 已 作为 一 门 独 立 的 、 专 业 的 ,具有 影响 力 的 工程 学 发 展 起 
KT. 


14 


软件 测试 实战 教程 


5. 预防 为 主 


预防 为 主 是 当下 软件 测试 的 主流 思想 之 一 。STEP(Systematic Test and Evaluation 
Process) 是 最 早 的 一 个 以 预防 为 主 的 生命 周期 模型 ,STEP 认为 软件 测试 与 开发 是 并 行 的 ， 
整个 软件 测试 的 生命 周期 也 是 由 计划 分析、 设计 、 开 发 .执行 和 维护 组 成 ,也 就 是 说 ,测试 不 
是 在 编码 完成 后 才 开 始 介 入 ,而 是 贯穿 于 整个 软件 生命 周期 。 我 们 都 知道 ,没有 100% 完 美 
的 软件 , 零 缺陷 是 不 可 能 的 ,所 以 我 们 要 做 的 是 : 尽量 早 地 介入 ,尽量 早 地 发 现 这 些 明显 的 
或 隐藏 的 Bug。 发 现 得 越 早 ,修复 起 来 的 成 本 越 低 ,产生 的 风险 也 越 小 。 

虽然 每 一 个 发 展 阶段 对 软件 测试 的 认识 都 有 其 局 限 性 ,但 是 前 辈 们 一 直 在 思考 和 总 结 
前 人 的 经 验 ,创造 性 地 提出 新 的 理论 和 方法 ,这 种 精神 非常 值得 尊敬 和 学 习 。 所 谓 以 铜 为 
镜 ,可 正 衣冠 ; 以 史 为 镜 ,可 明 得 失 。 知 道 了 从 哪里 来 ,才能 更 好 地 明白 该 到 哪里 去 。 


1.2.3 软件 测试 七 条 原则 


在 过 去 的 40 年 中 ,软件 测试 界 提出 了 很 多 测试 原则 ,并且 提供 了 适合 所 有 测试 的 一 些 
通用 的 测试 指南 。 


1. 软件 测试 是 为 了 找到 软件 的 缺陷 ,而 不 是 证 明 软 件 没 有 缺陷 


测试 可 以 显示 存在 缺陷 ,但 不 能 证 明 系统 不 存在 缺陷 。 测 试 可 以 减少 软件 中 存在 未 被 
发 现 缺 陷 的 可 能 性 ,但 即使 测试 没有 发 现任 何 缺陷 ,也 不 能 证 明 软 件 或 系统 是 完全 正确 的 。 


2. 穷尽 所 有 测试 是 不 可 能 的 

除了 小 型 项 目 ,进行 完全 (各 种 输入 和 前 提 条 件 的 组 合 ) 的 测试 是 不 可 行 的 。 通 过 运用 
风险 分 析 和 不 同系 统 功能 的 测试 优先 级 ,来 确定 测试 的 关注 点 ,从 而 替代 穷尽 测试 。 

3. 软件 测试 活动 应 当 尽 早 开始 


为 了 尽早 发 现 缺 陷 , 在 软件 或 系统 开发 生命 周期 中 ,测试 活动 应 该 尽 可 能 早 介入 ,并且 
应 该 将 关注 点 放 在 已 经 定义 的 测试 目标 上 。 


4. 缺陷 的 存在 遵循 80/20 法 则 ( 帕 累 托 法 则 ) 


测试 工作 的 分 配 比 例 应 该 与 预期 的 和 后 期 观察 到 的 缺陷 分 布 模块 相 适 应 。 少 数 模块 通 
常 包 含 大 部 分 在 测试 版 本 中 发 现 的 缺陷 或 失效 。 


5. жа 


使 用 农药 杀 虫 ,常用 一 种 农药 ,害虫 最 后 就 有 抵抗 力 ,农药 发 挥 不 了 多 大 的 效力 。 这 种 
现象 被 称 为 杀 虫 剂 悖 论 。 

采用 同样 的 测试 用 例 多 次 重复 进行 测试 ,最 后 将 不 再 能 够 发 现 新 的 缺陷 。 为 了 克服 这 
种 杀 虫 剂 悖 论 ,需要 进行 定期 评审 和 修改 测试 用 例 ,同时 需要 不 断 增加 新 的 不 同 的 测试 用 例 
来 测试 软件 或 系统 的 不 同 部 分 ,从 而 发 现 潜在 的 更 多 的 缺陷 。 
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6. 测试 活动 依赖 于 测试 背景 


针对 不 同 的 测试 背景 ,进行 不 同 的 测试 活动 。 比 如 ,对 安全 关键 的 软件 进行 测试 ,与 对 
一 般 的 电子 商务 软件 的 测试 是 不 一 样 的 。 


7. 不 存在 缺陷 (就 是 有 用 系统 ) 的 廖 论 


假如 系统 无 法 使 用 ,或 者 系统 不 能 完成 客户 的 需求 和 期 望 ,发 现 和 修改 缺陷 是 没有 任何 

除了 ISTQB 认证 课程 大 纲 列 出 的 七 条 原则 外 ,还 有 一 些 原则 。 

第 一 ,测试 应 该 由 独立 的 第 三 方 进行 。 

即 避 免 “ 既 是 运动 员 又 是 裁判 员 ”, 软 件 测试 工作 应 由 专门 的 测试 人 员 完 成 ,软件 开发 人 
员 按 照 开发 软件 的 思维 很 难 发 现 一 些 软件 缺陷 ,测试 人 员 可 以 从 用 户 的 角度 测试 软件 ,更 容 
易 发 现 一 些 软件 缺陷 。 

第 二 ,软件 测试 是 一 项 复杂 的 .具有 创造 性 的 和 需要 高 度 智 慧 的 挑战 性 任务 。 

人 们 对 软件 测试 的 一 个 误解 是 : 软件 测试 是 没有 什么 技术 含量 的 ,做 不 了 软件 开发 的 
人 才 去 做 软件 测试 。 造 成 这 个 误解 的 原因 可 能 是 软件 测试 工作 的 门槛 比 软件 开发 低 , 软 件 
测试 不 仅 需 要 执行 软件 测试 的 人 员 ,还 需要 设计 软件 测试 的 人 员 。 而 软件 测试 设计 人 员 需 
要 掌握 更 多 的 技术 ,例如 测试 自动 化 技术 等 。 


6.3 如 何 进行 软件 测试 


老 沙 在 分 析 Z 公司 的 项 目 失败 的 原因 时 ,进一步 问 Z 公司 的 IT 人 员 :“ 你 们 是 如 何 进 
行 软件 测试 的 呢 ?”Z 公司 的 YT 人 员 回 答 :“ 我 们 在 编程 时 ,发 现 错误 就 改正 错误 ,直到 程序 
没有 错误 可 以 运行 了 。 我 们 还 运行 了 程序 ,用 户 要 求 的 功能 我 们 都 实现 了 。 测 试 很 简单 ,我 
们 都 会 编程 ,难道 还 不 会 测试 吗 ?” 

软件 测试 真 的 很 简单 吗 ? 

关于 如 何 进行 软件 测试 ,我 们 可 以 这 样 描述 : 按照 基本 的 测试 过 程 ,针对 不 同 的 测试 级 
别 、 测 试 类 型 ,选择 适当 的 测试 技术 和 测试 方法 ,使 用 可 能 的 测试 工具 ,对 软件 产品 进行 
测试 。 


1.3.1 基本 的 测试 过 程 


测试 最 显而易见 的 活动 是 测试 的 执行 。 但 是 为 了 提高 效率 和 有 效 性 ,在 测试 计划 中 , 同 
样 需要 花费 比较 多 的 时 间 用 于 计划 测试 活动 .设计 测试 用 例 、 准 备 测 试 的 执行 和 评估 测试 的 

基本 的 测试 过 程 主要 由 下 面 一 些 活动 组 成 : 

。 测试 计划 和 控制 。 

。 测试 分 析 和 设计 。 

t 测试 实现 和 执行 。 
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。 评估 出 口 准 则 和 报告 。 

。 测试 结束 活动 。 

虽然 上 面 这 些 活动 在 逻辑 上 是 连续 的 ,但 在 整个 测试 过 程 中 它们 可 能 会 重 闪 或 同时 进 
行 。 通 常 在 相应 的 系统 或 项 目 环 境 下 剪裁 这 些 主 要 活动 行为 是 必需 的 。 


1. 测试 计划 和 控制 阶段 


测试 计划 的 主要 活动 是 : 识别 测试 任务 、 定 义 测试 目标 以 及 为 了 实现 测试 目标 和 任务 
确定 必要 的 测试 活动 。 

测试 控制 是 持续 进行 的 活动 : 通过 对 测试 实际 进度 和 测试 计划 之 间 的 比较 ,报告 测试 
的 状态 , 包括 与 计划 之 间 存 在 的 偏差 。 测 试 控制 包括 在 必要 的 时 候 采 取 必 要 的 措施 来 满足 
测试 的 任务 和 目标 。 需要 在 项 目的 整个 生命 周期 中 对 测试 活动 进行 监督 ,以 达到 控制 测试 
过 程 的 目的 。 同 时 ,测试 计划 的 制定 也 需要 考虑 测试 监控 活动 的 反馈 信息 。 

测试 计划 和 控制 阶段 的 任务 将 在 第 2 章 讲述 。 


2. 测试 分 析 和 设计 阶段 


测试 分 析 和 设计 是 将 概括 的 测试 目标 转化 为 具体 的 测试 条 件 和 测试 用 例 的 一 系列 活 

测试 分 析 和 设计 阶段 的 主要 任务 如 下 : 

* 评审 测试 依据 (比如 需求 .软件 完整 性 .风险 分 析 报告 ,系统 架构 .设计 和 接口 说 明 ) 。 

* 评估 测试 依据 和 测试 对 象 的 可 测 性 。 

。 通 过 对 测试 项 规格 说 明 、 测 试 对 象 行为 和 结构 的 分 析 , 识 别 测试 条 件 并 确定 其 优 
先 级 。 

。 设 计 测 试用 例 并 确定 优先 级 。 

。 确 定 测试 条 件 和 测试 用 例 所 需要 的 测试 数据 。 

。 规 划 测 试 环境 的 搭建 和 确定 测试 需要 的 基础 设施 和 工具 。 

。 创建 测试 依据 和 测试 用 例 间 的 双向 可 追溯 性 。 


动 


° 


3. 测试 实现 和 执行 阶段 


测试 实现 和 执行 阶段 的 主要 活动 包括 : 通过 特定 的 顺序 组 织 测 试用 例 来 完成 测试 规程 
和 脚本 的 设计 ,并 且 包括 测试 执行 所 需 的 其 他 任何 信息 ,以 及 测试 环境 的 搭建 和 运行 测试 。 
测试 实现 和 执行 阶段 的 主要 任务 如 下 : 
。 测试 用例 的 开发 .实现 并 确定 它们 的 优先 级 (包括 识别 测试 数据 )。 
开发 测试 规程 并 确定 优先 级 ,创建 测试 数据 ,同时 也 可 以 准备 测试 用 具 和 设计 自动 
化 测试 脚本 。 
根据 测试 规程 创建 测试 套件 ,以 提高 测试 执行 的 效率 。 
确认 已 经 正确 搭建 了 测试 环境 。 
确认 并 更 新 测试 依据 和 测试 用 例 间 的 双向 可 追溯 性 。 
根据 计划 的 执行 顺序 ,通过 手工 或 使 用 测试 执行 工具 来 执行 测试 规程 。 
记录 测试 执行 的 结果 ,以 及 被 测 软件 ,测试 工具 和 测试 件 的 标识 和 版 本 。 
将 实际 结果 和 预期 结果 进行 比较 。 
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+ 对 实际 结果 和 预期 结果 之 间 的 差异 ,作为 事件 上 报 , 并 且 进 行 分 析 以 确定 引起 差异 
的 原因 (例如 ,代码 缺陷 、 具 体 测试 数据 缺陷 ,测试 文档 缺陷 或 测试 执行 的 方法 有 误 
等 )。 

* 缺陷 修正 后 ,重新 进行 测试 活动 。 比 如 通过 再 次 执行 上 次 执行 失败 的 用 例 来 确认 缺 
陷 是 否 已 经 被 修正 (确认 测试 )。 执 行 修正 后 的 测试 用 例 或 执行 一 些 测试 用 例 来 确 
保 缺 陷 的 修正 没有 对 软件 未 修改 的 部 分 造成 不 良 影响 或 对 于 缺陷 的 修正 没有 引发 
其 他 的 缺陷 (回归 测试 )。 


4. 评估 出 口 准则 和 报告 


评估 出 口 准 则 是 将 测试 的 执行 结果 和 已 经 定义 的 测试 目标 进行 比较 的 活动 。 这 个 活动 
在 各 个 测试 级 别 上 都 需要 进行 。 

评估 测试 出 口 准则 的 主要 任务 如 下 : 

+ 按照 测试 计划 中 定义 的 测试 出 口 准则 检查 测试 日 志 。 

。 评估 是 否 需 要 进行 更 多 的 测试 ,或 是 否 需 要 更 改 测试 的 出 口 准则 。 

* 为 利益 相关 者 提供 一 个 测试 总 结 报告 。 


5. 测试 结束 活动 


测试 结束 活动 就 是 从 已 完成 的 测试 活动 中 收集 和 整合 有 用 的 数据 ,这 些 数据 可 以 是 测 
试 经 验 测试 件 .影响 测试 的 因素 和 其 他 数据 。 在 以 下 几 种 情况 下 需要 执行 测试 结束 活动 ， 
例如 : 当 软 件 系统 正式 发 布 , 当 一 个 测试 项 目 完 成 (或 取消 )、 当 达到 一 个 里 程 碑 或 当 一 个 维 
护 版 本 完成 时 。 

测试 结束 活动 的 主要 任务 如 下 : 

。 检查 提交 了 哪些 计划 的 可 交付 产品 。 
事件 报告 是 否 关闭 或 对 未 关闭 的 事件 报告 提交 变更 需求 。 


。 记录 系统 的 验收 。 
* 记录 和 归档 测试 件 、 测 试 环境 和 测试 基础 设备 ,以 便 以 后 重复 使 用 。 
。 移 交 测 试 件 到 维护 部 门 。 


分 析 和 记录 所 获得 的 经 验 教训 ,用 于 以 后 的 项 目 和 测试 成 熟 度 改进 。 
使 用 为 测试 成 熟 度 的 提高 所 收集 的 信息 。 


1.3.2 软件 测试 级 别 .测试 类 型 和 测试 技术 


软件 测试 贯穿 软件 开发 的 全 过 程 ,从 需求 分 析 、 系 统 设计 到 交付 使 用 ,是 对 软件 的 各 个 
方面 的 测试 。 因 而 从 不 同 的 角度 划分 ,就 有 各 种 测试 方法 。 主 要 有 两 种 划分 方法 : 按 软件 
的 生命 周期 划分 和 按 测试 是 否 需要 运行 软件 划分 。 下 面 先 熟 悉 一 下 ISTQB 课程 大 纲 描述 
的 几 个 术语 。 

测试 级 别 /测试 阶段 : 统一 组 织 和 管理 的 一 组 测试 活动 。 测 试 级 别 与 项 目的 职责 相关 
联 。 例 如 ,测试 级 别 包 括 组 件 测试 .集成 测试 .系统 测试 和 验收 测试 。 

测试 类 型 : 旨 在 针对 特定 测试 目标 ,测试 组 件 /系统 的 一 组 测试 活动 。 例 如 ,功能 测试 、 
非 功能 测试 . 易 用 性 测试 .回归 测试 等 。 一 个 测试 类 型 可 能 发 生 在 一 个 或 多 个 测试 级 别 或 测 
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试 阶段 。 

测试 策略 : 描述 了 一 个 组 织 或 一 个 计划 (这 个 计划 包含 一 个 或 多 个 项 目 ) 执 行 的 测试 级 
别 和 需要 进行 的 测试 。 

测试 技术 /测试 设计 技术 /测试 用 例 设计 技术 : 用 来 衍生 和 /或 选择 测试 用 例 的 步骤 。 
例如 ,项 态 测试 技 术 和 动态 测试 技术 ,动态 测试 技术 主要 包括 白 盒 测试 设计 技术 、. 黑 盒 测试 
设计 技术 和 基于 经 验 的 测试 技术 ,还 有 基于 模型 的 测试 技术 。 

测试 方法 : 针对 特定 项 目的 测试 策略 的 实现 ,通常 包括 根据 测试 项 目的 目标 和 风险 进 
行 评估 之 后 所 做 的 决策 ,测试 过 程 的 起 点 、 采 用 的 测试 设计 技术 、 退 出 准则 和 所 执行 的 测试 


1. 软件 测试 模型 


软件 测试 与 软件 开发 密切 相关 ,人 们 在 软件 开发 模型 的 基础 上 提出 多 种 软件 测试 模型 。 
模型 是 对 现实 的 抽象 概括 ,是 对 某 些 真 实事 件 的 简化 表征 。 

D V 模型 (顺序 开发 模型 ) 

20 世纪 80 年 代 后 期 ,Paul Rook 提出 了 著名 的 软件 测试 的 V 模型 ,V 模型 是 瀑布 模型 
的 变种 , 它 反映 了 测试 活动 与 分 析 和 设计 的 关系 ,非常 明确 地 表明 了 测试 过 程 中 存在 的 不 同 
级 别 , 以 及 测试 各 阶段 与 开发 过 程 中 各 阶段 的 对 应 关系 ,如 图 1. 10 所 示 。 


需求 分 析 验收 测试 
| 功能 设计 | 系统 测试 


А 


概要 设计 — 集成 测试 


Li 详细 设计 单元 测试 | 
= 一 一 一 验证 和 确认 
— 


图 1.10 V 模型 


虽然 存在 多 种 多 样 的 V 模型 ,但 典型 的 V 模型 一 般 有 四 种 测试 级 别 ,分 别 与 四 种 开发 
级 别 相对 应 。 

在 ISTQB 课程 大 纲 中 ,这 四 种 测试 级 别 是 : 

。 组 件 / 单 元 测试 。 

。 集成 测试 。 

。 系统 测试 。 

。 验收 测试 。 

实际 上 ,V 模型 的 测试 级 别 可 能 会 比 上 面 提 到 的 四 种 多 ,也 可 能 少 , 或 者 有 不 同 的 测试 
级 别 , 这 取决 于 不 同 的 项 目 和 软件 产品 。 比 如 ,在 组 件 测试 后 可 能 有 组 件 集 成 测试 ,在 系统 
测试 后 有 系统 集成 测试 。 
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在 开发 过 程 中 生成 的 软件 工作 产品 (比如 业务 场景 、 用 例 、 需 求 规格 说 明 、 设 计 文档 和 代 
码 ) 常 常 作为 一 种 或 多 种 测试 级 别 的 测试 基础 。 通 用 的 工作 产品 可 以 参考 能 力 成 熟 度 模型 
集成 CMMI 或 软件 生命 周期 过 程 (IEEE/IEC12207)。 验 证 和 确认 (早期 的 测试 设计 ) 可 以 
在 软件 工作 产品 的 开发 过 程 中 进行 。 

2) 迭代 - 增 量 开 发 模型 

迭代 - 增 量 开 发 模型 由 需求 建立 设计、 构建 和 测试 等 一 系列 相对 较 短 的 开发 周期 构成 。 
比如 ,原型 开发 .快速 应 用 开发 (RAD) ,统一 软件 开发 过 程 (RUP) 和 敏捷 开发 模型 等 。 在 每 
次 迭代 过 程 中 ,对 迭代 产生 的 系统 可 能 需要 在 不 同 的 测试 级 别 上 进行 测试 。 通 过 将 增 量 模 
块 加 入 到 以 前 开发 的 模块 中 ,形成 一 个 逐渐 增 大 的 系统 ,这 个 系统 同样 需要 进行 测试 。 在 完 
成 第 一 次 迭代 后 ,对 所 有 的 迭代 进行 回归 测试 变 得 越 来 越 重 要 。 验 证 和 确认 可 以 在 每 个 增 
量 模块 中 进行 。 


2. 生命 周期 模型 中 的 测试 


在 任何 生命 周期 模型 中 ,良好 的 测试 都 应 该 具有 下 面 几 个 特点 : 

。 每 个 开发 活动 都 有 相对 应 的 测试 活动 。 

。 每 个 测试 级 别 都 有 其 特有 的 测试 目标 。 

。 对 于 每 个 测试 级 别 , 需 要 在 相应 的 开发 活动 过 程 中 进行 相应 的 测试 分 析 和 设计 。 

。 在 开发 生命 周期 中 ,测试 员 在 文档 初稿 阶段 就 应 该 参与 文档 的 评审 。 

根据 项 目的 特征 或 系统 的 架构 ,可 以 对 测试 级 别 进行 合并 或 重新 进行 组 合 。 比 如 ,对 于 
商业 现货 软件 (COTS) 产 品 集成 到 某 个 系统 ,购买 者 可 以 在 系统 级 别 ( 例 如 ,与 基础 设施 集 
成 ,与 其 他 系统 的 集成 或 与 系统 应 用 的 集成 ) 进 行 集成 测试 和 验收 测试 (功能 的 和 /或 非 功能 
的 测试 .用 户 和 /或 运行 测试 等 )。 


3. 测试 级 别 


按照 V 模型 ,可 将 测试 分 为 如 下 四 个 级 别 : 

。 组 件 /单元 测试 。 

。 集 成 测试 。 

。 验收 测 试 。 

对 于 每 个 测试 级 别 ,都 需要 明确 下 面 的 内 容 : 测试 的 总 体 目标 、 测 试用 例 设计 需要 参考 
的 工作 产品 ( 即 测试 的 依据 )` 测 试 的 对 象 ( 即 测试 什么 )、 发 现 的 典型 缺陷 和 失效 、 对 测试 用 
具 的 需求 ,测试 工具 的 支持 ,专门 的 方法 和 职责 等 。 

在 测试 计划 中 应 当 考虑 是 否 对 系统 配置 数据 进行 测试 。 

1) 组 件 测试 /单元 测试 

测试 依据 : 

。 组 件 需 求 说 明 。 

。 详细 设计 文档 。 

。 代码。 

典型 测试 对 象 : 
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* AL. 

。 程序。 

。 数据 转换 /移植 程序 。 

° 数据 库 模 型 。 

在 独立 可 测试 的 软件 中 (模块 ,程序 ,对象 和 类 等 ) ,可 以 通过 组 件 测试 发 现 缺 陷 , 以 及 验 
证 软件 功能 。 根 据 开发 生命 周期 和 系统 的 背景 ,组 件 测试 可 以 与 系统 的 其 他 部 分 分 开 ,单独 
进行 测试 。 在 组 件 测试 过 程 中 ,会 使 用 到 桩 、 驱 动 器 和 模拟 器 。 

组 件 测试 可 能 包括 功能 测试 和 特定 的 非 功 能 特征 测试 ,比如 资源 行为 测试 (如 内 存 泄 
漏 ) 健壮 性 测试 和 结构 测试 (比如 分 支 覆 盖 ) 。 根 据 工作 产品 ,例如 组 件 规格 说 明 、 软 件 设计 
或 数据 模型 等 设计 测试 用 例 。 

通常 ,通过 开发 环境 的 支持 ,比如 组 件 测试 框架 或 调试 工具 ,组 件 测试 会 深入 到 代码 中 ， 
而 且 实际 上 设计 代码 的 开发 人 员 通 常 也 会 参与 其 中 。 在 这 种 情况 下 ,一 旦 发 现 缺陷 ,就 可 以 
立即 进行 修改 ,而 不 需要 正式 的 缺陷 管理 过 程 。 

组 件 测试 的 一 个 方法 是 在 编写 代码 之 前 就 编写 完成 自动 化 测试 用 例 , 这 称 为 测试 优先 
的 方法 或 测试 驱动 开发 。 这 是 高 度 迭 代 的 方法 ,并 且 取 决 于 如 下 的 循环 周期 : 测试 用 例 的 
开发 .构建 和 集成 小 块 的 代码 ,执行 组 件 测试 ,修正 任何 问题 并 反复 循环 ,直到 它们 全 部 通过 
测试 。 

2) 集成 测试 

测试 依据 : 

。 软件 和 系统 设计 文档 。 

。 系统 架构 。 

。 工 作 流 。 

。 用例。 

典型 测试 对 象 : 

° FRE. 

° 数据 库 实 现 。 

。 基础 结构 。 

。 接口。 

。 系统 配置 和 配置 数据 。 

集成 测试 是 对 组 件 之 间 的 接口 进行 测试 ,以 及 测试 一 个 系统 内 不 同 部 分 的 相互 作用 , 比 
如 操作 系统 文件 系统 、 硬 件 或 系统 之 间 的 接口 。 

对 于 集成 测试 ,可 以 应 用 多 种 集成 级 别 ,也 可 以 根据 不 同 的 测试 对 象 规模 采用 不 同 的 级 
别 , 比 如 : 

。 组 件 集成 测试 对 不 同 的 软件 组 件 之 间 的 相互 作用 进行 测试 ,一 般 在 组 件 测试 之 后 
进行 。 
系统 集成 测试 对 不 同系 统 或 软 硬 件 之 间 的 相互 作用 进行 测试 ,一 般 在 系统 测试 之 后 
进行 。 在 这 种 情况 下 ,开发 组 织 /团体 通常 可 能 只 控制 自己 这 边 的 接口 ,这 就 可 能 存 
在 风险 。 按 照 工 作 流 执行 的 业务 操作 可 能 包含 了 一 系列 系统 ,因此 跨 平台 的 问题 可 
能 至 关 重 要 。 


第 1 章 “软件 测试 基础 “A 21 
AA 


集成 的 规模 越 大 ,就 越 难以 在 某 一 特定 的 组 件 或 系统 中 定位 缺陷 ,从 而 增加 了 风险 并 会 
花费 额外 的 更 多 时 间 去 发 现 和 清除 这 些 故障 。 

系统 化 集成 的 策略 可 以 根据 系统 结构 (例如 , 自 顶 向 下 或 自 底 向 上 )、 功 能 任务 集 、 事 务 
处 理 顺序 或 系统 和 组 件 的 其 他 方面 等 来 制定 。 为 了 能 方便 快速 地 隔离 故障 和 定位 缺陷 , 集 
成 程度 应 该 逐步 增加 ,而 不 是 采用 “大 爆炸 ” 式 的 集成 。 

测试 特定 的 非 功 能 特征 (比如 性 能 ) 也 可 以 包含 在 系统 集成 测试 中 。 

在 集成 的 每 个 阶段 ,测试 员 只 是 把 精力 集中 在 集成 本 身 。 举 例 来 说 ,假如 集成 模块 A 
和 模块 B, 测 试 人 员 应 该 关注 两 个 模块 之 间 的 交互 ,而 不 是 每 个 模块 的 功能 。 功 能 测试 和 结 
构 测 试 方法 都 可 以 应 用 在 集成 测试 中 。 

在 理想 情况 下 ,测试 员 应 该 理解 系统 的 架构 ,从 而 可 以 影响 相应 的 集成 计划 。 假 如 集成 
测试 计划 是 在 组 件 或 系统 生成 之 前 制定 , 则 可 以 根据 对 集成 最 有 效率 的 顺序 来 进行 设计 。 

3) 系统 测试 

测试 依据 : 

* 系统 和 软件 需求 规格 说 明 。 

。 用例 。 

。 功能 规格 说 明 。 

。 风 险 分 析 报 告 。 

典型 测试 对 象 : 

。 系统 、 用 户 手 册 和 操作 手册 。 

。 系统 配置 和 配置 数据 。 

系统 测试 关注 的 是 在 开发 项 目 或 程序 中 定义 的 一 个 完整 的 系统 /产品 的 行为 。 在 主 测 
试 计划 和 /或 在 其 所 处 的 测试 级 别 的 测试 计划 内 应 该 明确 测试 范围 

在 系统 测试 中 ,测试 环境 应 该 尽量 和 最 终 的 目标 或 生产 环境 相 一 致 ,从 而 减少 不 能 发 现 
和 环境 相关 的 失效 的 风险 。 

系统 测试 可 能 包含 基于 不 同方 面 的 测试 : 基于 风险 评估 的 、 基 于 需求 规格 说 明 的 、 基 于 
业务 过 程 的 .基于 用 例 的 ,基于 其 他 对 系统 行为 的 更 高 级 别 描述 或 模型 的 ,基于 与 操作 系统 
的 相互 作用 的 、 基 于 系统 资源 的 等 测试 。 

系统 测试 应 该 对 系统 功能 和 非 功 能 需求 进行 研究 。 需 求 可 以 以 文本 形式 或 模型 方式 描 
述 。 同 时 测试 员 也 需要 面 对 需 求 不 完全 或 需求 没有 文档 化 的 情况 。 针 对 功能 需求 的 系统 测试 
开始 时 可 以 选择 最 适合 的 基于 规格 说 明 的 测试 即 黑 盒 技术 来 对 系统 进行 测试 。 比 如 ,可 以 根 
据 业 务 准 则 描述 的 因果 组 合 来 生成 决策 表 。 基 于 结构 的 技术 即 白 盒 测试 技术 ,可 以 评估 测试 
的 覆盖 率 , 可 以 基于 评估 覆盖 一 个 结构 元 素 , 如 菜单 结构 或 者 页 面 的 导航 等 的 完整 性 。 

系统 测试 通常 由 独立 的 测试 团队 进行 。 

4) 验收 测试 

测试 依据 : 

。 用 户 需求 。 

。 用 例 。 

° 业务 流程 。 


Uu 
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风险 分 析 报 告 。 


典型 测试 对 象 : 


验 


参与 其 中 


验 


基于 完全 集成 系统 的 业务 流程 。 

操作 与 维护 流程 。 

用 户 处 理 过 程 。 

结构 。 

报告 。 

配置 数据 。 

收 测试 通常 是 由 使 用 系统 的 用 户 或 客户 来 进行 ,同时 系统 的 其 他 利益 相关 者 也 可 能 


区 测试 的 目的 是 建立 对 系统 、 系 统 的 某 部 分 或 特定 的 系统 非 功 能 特征 的 信心 。 发 现 


缺陷 不 是 验收 测试 的 主要 目标 。 验 收 测试 可 以 用 来 评估 系统 对 于 部 署 和 使 用 的 准备 情况 ， 


但 是 验 


区 测试 不 一 定 是 最 后 级 别 的 测试 。 比 如 ,可 能 会 在 进行 某 个 系统 验收 测试 之 后 ,进行 


大 规模 的 系统 集成 测试 。 


验 


区 测试 可 以 在 多 个 测试 级 别 上 进行 ,比如 : 

商业 现货 软件 (COTS) 产 品 可 以 在 安装 或 集成 时 进行 验收 测试 。 
组 件 的 可 用 性 验收 测试 可 以 在 组 件 测试 中 进行 。 

增加 新 功能 的 验收 测试 可 以 在 系统 测试 之 前 进行 。 


验 


° 
© 
@ 
@ 
© 
© 


收 准 则 


区 测试 有 下 面 几 种 典型 的 类 型 : 

用 户 验收 测试 。 通 常 由 商业 用 户 验证 系统 的 可 用 性 。 

操作 (验收 ?测试 。 系 统 操作 验收 测试 由 系统 管理 员 来 进行 ,测试 内 容 主 要 包括 : 
系统 备份 /恢复 测试 。 

灾难 恢复 测试 。 

用 户 管理 测试 。 

维护 任务 测试 。 

数据 加 载 和 移植 活动 。 

安全 漏洞 阶段 性 检查 。 

合同 和 法 规 性 验收 测试 。 合 同 验收 测试 根据 合同 中 规定 的 生产 客户 定制 软件 的 验 
,对 软件 进行 测试 。 应 该 在 合同 拟定 时 定义 验收 准则 。 法 规 性 验收 测试 根据 必须 要 


遵守 的 法 律 法 规 来 进行 测试 ,比如 政府 ,法律 和 安全 方面 的 法 律 法 规 。 


Alpha 和 Beta( 或 现场 ) 测 试 。 在 软件 产品 正式 商业 销售 之 前 ,市场 或 商业 现货 软件 


开发 人 员 和 希望 从 市 场 中 潜在 的 或 已 经 存在 的 客户 中 得 到 关于 软件 的 反馈 信息 。Alpha 测试 
通常 在 开发 组 织 现场 进行 ,但 测试 并 非 由 开发 团队 执行 。Beta 测试 (或 实地 测试 ) 是 在 客户 
或 潜在 客户 现场 进行 并 由 他 们 执行 。 

有 些 组 织 也 可 能 使 用 不 同 的 术语 ,比如 在 系统 正式 移交 给 客户 之 前 或 之 后 进行 的 测试 
分 别称 为 工厂 验收 测试 和 现场 验收 测试 等 。 


4. 


根 


测试 类 型 
据 特定 的 测试 目标 或 测试 原因 ,一 系列 测试 活动 可 以 旨 在 对 软件 系统 (或 系统 的 一 部 
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分 ) 进行 测试 。 

每 种 测试 类 型 都 会 针对 特定 的 测试 目标 : 

。 可 能 是 测试 软件 所 实现 的 功能 。 

+ 也 可 能 是 非 功能 的 质量 特征 ,比如 可 靠 性 或 可 用 性。 

。 软件 或 系统 的 结构 或 架构 。 

。 相关 变更 ,如 确认 缺陷 已 被 修改 (确认 测试 ) 以 及 更 改 后 是 否 引入 新 的 缺陷 (回归 测试 ) 。 

一 个 软件 的 模型 可 以 用 来 开发 和 /或 应 用 在 基于 结构 的 测试 (例如 ,控制 流 模型 或 菜单 
结构 模型 )、 非 功能 测试 (性 能 模型 .可 用 性 模型 .安全 威胁 建 模 ) 和 功能 测试 (过 程 流 模型 、 
状态 转换 模型 或 简明 语言 规范 ) 。 

常用 的 测试 类 型 有 如 下 四 种 : 

1) 功能 测试 

系统 、 子 系统 或 组 件 要 实现 的 功能 可 以 在 工作 产品 (如 需求 规格 说 明 书 、 用 户 用 例 或 功 
能 规格 说 明 书 ) 中 予以 描述 ,不 过 也 可 能 没有 相应 的 文档 。 功 能 指 的 是 系统 能 做 什么 。 

功能 测试 基于 功能 和 特征 (在 文档 中 描述 的 内 容 或 测试 员 自 己 的 理解 ) 以 及 专门 的 系统 
之 间 的 交互 ,可 以 在 各 个 级 别 的 测试 中 进行 (例如 组 件 测试 可 以 基于 组 件 的 规格 说 明 书 )。 

可 以 采用 基于 规格 说 明 的 技术 ,根据 软件 或 系统 的 功能 来 设计 测试 条 件 和 测试 用 例 。 
功能 测试 主要 是 考虑 软件 的 外 部 表现 行为 ( 黑 盒 测试 ) 。 

安全 性 测试 是 功能 测试 的 一 种 , 它 会 对 与 安全 性 相关 的 功能 (比如 防火 墙 ) 进 行 测试 ,从 
而 检测 系统 和 数据 是 否 能 抵御 外 部 恶意 的 威胁 ,如 病毒 等 。 互 操作 性 测试 是 另 一 种 功能 测 
试 ,评估 软件 产品 与 其 他 一 个 或 多 个 组 件 或 系统 交互 的 能 力 。 

2) 软件 非 功 能 特征 测试 ( 非 功能 测试 ) 

非 功 能 测试 包括 但 不 限于 性 能 测试 、 负 载 测 试 、 压 力 测试 、 可 用 性 测试 、 可 维护 性 测试 、 
可 靠 性 测试 和 可 移植 性 测试 。 非 功能 性 测试 就 是 测试 系统 运行 的 表现 如 何 。 

非 功 能 测试 可 以 在 任何 测试 级 别 上 执行 。 术 语 “ 非 功能 测试 "是 指 : 为 了 测量 系统 和 软件 
的 特征 而 进行 的 测试 。 这 些 特征 可 以 用 不 同 尺度 予以 量化 ,比如 进行 性 能 测试 来 检验 响应 时 
间 。 这 些 非 功 能 测试 可 以 参考 “软件 工程 一 软件 产品 质量 (ISO9126)” 中 定义 的 质量 模型 。 非 
功能 测试 关注 的 是 软件 的 外 部 行为 表现 ,通常 采用 黑 盒 测 试 设计 技术 来 设计 测试 用 例 。 

3) 软件 结构 /架构 测试 (结构 测试 ) 

可 以 在 任何 测试 级 别 上 进行 结构 测试 ( 白 盒 测试 )。 结 构 测试 技术 最 好 在 进行 基于 规格 
说 明 的 测试 之 后 使 用 ,以 便 通 过 评估 结构 类 型 的 覆盖 来 测量 测试 的 完整 性 。 

覆盖 率 是 指 结构 通过 测试 套件 检验 的 程度 ,用 已 测 项 数量 占 需 要 测试 项 数量 的 百分比 
来 表示 。 假 如 覆盖 率 不 是 100% ,可 能 需要 设计 更 多 的 测试 用 例 , 来 测试 被 遗漏 的 项 ,从 而 
提高 测试 的 覆盖 率 。 

在 所 有 的 测试 级 别 中 ,特别 是 在 组 件 测试 和 组 件 集成 测试 中 ,可 以 利用 工具 来 测量 代码 
内 某 些 元 素 的 覆盖 率 ,比如 语句 覆盖 和 判定 覆盖 。 结 构 测试 也 可 以 基于 系统 的 结构 ,比如 调 
用 层次 结构 。 

结构 测试 方法 也 同样 可 以 运用 到 系统 、 系 统 集成 或 验收 测试 级 别 ( 比 如 业务 模型 或 菜单 
结构 )。 

4) 与 变更 相关 的 测试 (再 测试 和 回归 测试 ) 

当 发 现 和 修改 了 一 个 缺陷 后 ,应 进行 再 测试 以 确定 已 经 成 功 地 修改 了 原来 的 缺陷 ,这 称 
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为 确认 测试 。 

回归 测试 是 对 已 被 测 过 的 程序 在 修改 缺陷 后 进行 的 重复 测试 ,以 发 现在 这 些 变更 后 是 
否 有 新 的 缺陷 引入 或 被 屏 项。 这些 缺陷 可 能 存在 于 被 测试 的 软件 中 ,也 可 能 在 与 之 相关 或 
不 相关 的 其 他 软件 组 件 中 。 当 软件 发 生变 更 或 者 应 用 软件 的 环境 发 生变 化 时 ,需要 进行 回 
归 测 试 。 回 归 测 试 的 规模 可 以 根据 在 以 前 正常 运行 的 软件 中 发 现 新 的 缺陷 的 风险 大 小 来 
决定 。 

确认 测试 和 回归 测试 可 以 重复 进行 。 

回归 测试 可 以 在 所 有 的 测试 级 别 上 进行 ,同时 适用 于 功能 测试 、 非 功能 测试 和 结构 测 
试 。 回 归 测 试 套件 一 般 都 会 执行 多 次 ,而 且 通 常 很 少 有 变动 ,因此 将 回归 测试 自动 化 是 很 好 
的 选择 。 


5. 测试 技术 和 方法 


D 静态 测试 技术 

静态 测试 (static testing) 指 不 需要 运行 软件 的 测试 ,包括 评审 和 静态 分 析 。 评 审 是 对 软 
件 不 可 运行 的 组 成 部 分 进行 的 测试 ,例如 测试 产品 说 明 书 , 对 此 进行 检查 和 审阅 。 静 态 分 析 
是 指 不 运行 被 测 程序 本 身 , 仅 通过 分 析 或 检查 源 程序 的 文法 、 结 构 、 过 程 ,接口 等 来 检查 程序 
的 正确 性 。 静 态 分 析 通 过 程序 静态 特性 的 分 析 , 找 出 欠缺 和 可 疑 之 处 ,例如 不 匹配 的 参数 、 
不 适当 的 循环 嵌 套 和 分 支 嵌 套 不 允许 的 递归 、 未 使 用 过 的 变量 、 空 指针 的 引用 和 可 疑 的 计 
算 等 。 静 态 测 试 结果 可 用 于 进一步 的 查 错 ,并 为 测试 用 例 的 选取 提供 指导 。 

静态 测试 常用 工具 有 Logiscope、PRQA 等 。 

与 要 求 运 行 软件 的 动态 测试 技术 不 同 ,静态 测试 技术 通过 手工 检查 (评审 ) 或 自动 化 分 
析 ( 静 态 分 析 ) 的 方式 对 代码 或 者 其 他 的 项 目 文档 进行 检查 而 不 需要 执行 代码 。 

评审 是 对 软件 工作 产品 (包括 代码 ) 进 行 测试 的 一 种 方式 ,可 以 在 动态 测试 执行 之 前 进 
行 。 在 生命 周期 早期 的 评审 过 程 中 发 现 并 修改 缺陷 (例如 发 现 需 求 中 的 缺陷 ) 的 成 本 会 比 在 
动态 测试 中 才 发 现 并 修改 这 些 缺 陷 的 成 本 低 得 多 。 

评审 可 以 完全 以 人 工 的 方式 进行 ,也 可 以 通过 工具 的 支持 来 进行 。 人 工 进 行 评审 的 主 
要 活动 是 检查 工作 产品 ,并 对 工作 产品 做 出 评估 。 可 以 对 任何 软件 工作 产品 进行 评审 ,包括 
需求 规格 说 明 、 设 计 规格 说 明 、 代 码 ,测试 计划 、 测 试 说 明 测试 用 例 .测试 脚本 .用户 指南 或 
Web 页 面 等 。 

软件 评审 的 主要 好 处 有 : 尽早 发 现 和 修改 缺陷 、 改 善 开 发 能 力 、 缩 短 开发 时 间 、 缩 减 测 
试 成 本 和 时 间 ,减少 产品 生命 周期 成 本 ,减少 缺陷 以 及 改善 沟通 等 。 评 审 也 可 以 在 工作 产品 
中 发 现 一 些 遗 漏 的 内 容 , 例 如 发 现 需求 有 遗漏 ,而 这 在 动态 测试 中 是 很 难 被 发 现 的 。 

静态 测试 (评审 静态 分 析 ) 和 动态 测试 具有 共同 的 目标 一 一 识别 缺陷 。 它 们 之 间 是 互 
补 的 一 一 不 同 的 技术 可 以 有 效 和 高 效 地 发 现 不 同类 型 的 缺陷 。 与 动态 测试 相 比 ,静态 技术 
发 现 的 是 软件 失效 的 原因 (缺陷 ) ,而 不 是 失效 本 身 。 

与 动态 测试 相 比 ,通过 评审 更 容易 发 现 如 下 典型 缺陷 : 与 标准 之 间 的 偏差 需求 内 的 错 
V .设计 错误 .可 维护 性 不 足 和 错误 的 接口 规格 说 明 等 等 。 

2) 评审 过 程 

评审 类 型 是 多 样 化 的 ,可 以 是 非常 不 正式 的 评审 (例如 评审 者 没有 书面 指导 性 资料 可 参 
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考 ), 也 可 以 是 非常 正式 的 评审 (有 团队 参与 ,书面 的 审查 结果 和 管理 审查 的 书面 步骤 )。 评 
审 过 程 的 正式 性 与 以 下 因素 相关 : 开发 过 程 的 成 熟 度 、 法 律 法 规 方面 的 要 求 或 审核 跟踪 的 
需要 。 

如 何 开展 评审 由 评审 的 目标 决定 (如 ,发 现 缺陷 .增加 理解 .培训 测试 员 和 团队 新 成 员 或 

对 讨论 和 决定 达成 共识 等 ) 。 

CD 正式 评审 的 阶段 。 

典型 的 正式 评审 由 下 面 几 个 主要 阶段 组 成 。 

Ф 计划 阶段 : 

。 定义 评审 标准 。 

。 选择 人 员 。 

。 分 配角 色 。 

+ 为 更 加 正式 的 评审 类 型 (比如 审查 ) 制 定 入 口 和 出 口 准则 。 

。 选择 需要 进行 评审 的 文档 的 内 容 。 

* 核对 入 口 准则 (针对 更 正式 的 评审 类 型 ) 。 

@ 预备 会 阶段 : 

。 分 发 文档 。 

。 向 评审 参与 者 解释 评审 的 目标 ,过程 和 文档 。 

© 个 人 准备 阶段 : 

。 先行 评审 文档 ,为 评审 会 议 做 准备 。 

。 标注 可 能 的 缺陷 .问题 和 建议 。 

@ 检查 /评价 /记录 结果 (评审 会 议 阶段 ) : 

。 讨论 和 记录 ,并 留 下 文档 化 的 结果 或 会 议 纪要 (针对 更 正式 的 评审 类 型 ) 。 

。 标注 缺陷 、 提 出 处 理 缺 陷 的 建议 、 对 缺陷 作出 决策 。 

* 在 任何 形式 的 会 议 期 间或 跟踪 任何 类 型 的 电子 通信 期 间 检 查 / 评 价 和 记录 问题 。 

© 返工 阶段 : 

。 修改 发 现 的 缺陷 (通常 由 作者 来 进行 ) 。 

。 记录 缺陷 更 新 的 状态 (在 正式 评审 中 ) 。 

跟踪 结果 阶段 : 

。 检查 缺陷 是 否 已 得 到 解决 。 

。 收集 度量 数据 。 

。 核对 出 口 准则 (针对 更 正式 的 评审 类 型 ) 。 

(2) 角色 和 职责 。 

典型 的 正式 评审 主要 有 下 面 几 种 角色 : 

° 经 理 : 决定 是 否 需 要 进行 评审 ,在 项 目 计 划 中 分 派 时 间 , 判 断 是 否 已 达到 评审 的 
目标 。 

。 主持 人 : 主持 文档 或 文档 集 的 评审 活动 ,包括 策划 评审 、 召 开会 议和 会 议 后 的 跟踪 。 
假如 需要 ,主持 人 可 能 还 需要 进行 不 同 观点 之 间 的 协调 。 主 持 人 通常 是 评审 成 功 与 
否 的 关键 。 

。 作者 : 待 评审 文档 的 作者 或 主要 责任 人 。 
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* FER: 具有 专门 技术 或 业务 背景 的 人 员 [ 也 称 为 检查 员 (checker) 或 审查 员 (inspector)]。 
他 们 在 必要 的 准备 后 ,标识 和 描述 被 评审 产品 存在 的 问题 (如 缺陷 )。 所 选择 的 评审 员 应 
该 在 评审 过 程 中 代表 不 同 的 观点 和 角色 ,并 且 应 该 参与 各 种 评审 会 议 。 

。 记录 员 : 记录 所 有 的 事件 .问题 ,以 及 在 会 议 过 程 中 识别 的 未 解决 的 问题 。 

从 不 同 的 角度 评审 软件 和 其 相关 工作 产品 并 使 用 检查 表 可 以 提高 评审 的 效果 和 效率 。 
例如 ,从 用 户 、 维 护 人 员 测试 人 员 或 操作 者 的 角度 编写 检查 表 , 或 从 典型 需求 问题 设计 检查 
表 都 有 助 于 揭示 之 前 未 检测 到 的 问题 。 

3) 评审 类 型 

一 篇 文档 可 能 需要 经 历 多 次 评审 。 如 果 使 用 了 不 止 一 种 评审 类 型 , 则 评审 的 顺序 可 能 
会 有 所 变化 。 比 如 ,技术 评审 之 前 可 能 会 进行 非 正式 评审 ,或 在 客户 走 查 之 前 可 能 进行 需求 
规格 说 明 审 查 。 常 用 评审 类 型 的 主要 特点 、 选 项 和 目的 如 下 : 

非 正 式 评 审 : 
没有 正式 的 过 程 。 

可 以 是 由 程序 员 的 同行 们 或 技术 负责 人 对 设计 和 代码 进行 评审 。 

评审 结果 可 以 文档 化 。 

根据 不 同 的 评审 者 ,评审 作用 可 能 会 不 同 。 

主要 目的 : 以 较 低 的 成 本 获得 收益 。 

走 查 : 

。 由 作者 主持 开会 。 

。 以 场景 演示 的 形式 和 同行 参加 的 方式 进行 。 

。 开放 式 模式 。 

° 评审 人 员 预 备 会 议 是 可 选 的 。 

* 包含 一 个 发 现 问题 的 列表 的 评审 报告 是 可 选 的 。 

。 记录 员 ( 不 是 作者 本 人 ) 是 可 选 的 。 

° 在 实际 情况 中 可 以 是 非常 正式 的 ,也 可 能 是 非常 不 正式 的 。 

° 主要 目的 : 学 习 、 增 加 理解 、 发 现 缺 陷 。 

技术 评审 : 

。 文 档 化 和 定义 的 缺陷 检测 过 程 ,需要 包含 同行 和 技术 专家 。 

。 可 能 是 没有 管理 者 参与 的 同行 评审 。 

。 理想 情况 下 由 专门 接受 过 培训 的 主持 人 (不 是 作者 本 人 ) 来 领导 。 

。 会 议 之 前 需要 进行 准备 。 

。 使 用 检查 表 是 可 选 的 。 

。 准备 评审 报告 ,包括 发 现 问题 的 列表 、 软 件 产品 是 否 符 合 需求 的 判断 ,对 发 现 的 问题 
提出 建议 。 

。 在 实际 情况 中 可 以 是 在 不 正式 和 非常 正式 之 间 。 

* 主要 目的 : 讨论 、 作 决策 .评估 候选 方案 ,发现 缺陷 .解决 技术 问题 .检查 与 规格 及 标 

准 的 符合 程度 。 
审查 : 

° 由 接受 过 专门 培训 的 主持 人 (不 是 作者 本 人 ) 来 领导 。 
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。 通常 是 同行 检查 。 
定义 了 不 同 的 角色 。 
引入 了 度量 。 
+ 根据 入 口 、 出 口 规则 的 检查 列表 和 规则 定义 正式 的 评审 过 程 。 
。 会 议 之 前 需要 进行 准备 。 
。 出 具 审 查 报告 和 发 现 问题 列表 。 
正式 的 跟踪 过 程 (过 程 改进 部 分 是 可 选 的 ) 。 
朗读 者 是 可 选 的 。 
。 主要 目的 : 发 现 缺陷 。 
走 查 技术 评 审 和 审查 可 以 是 在 同行 , 即 由 同一 组 织 级 别 内 的 同事 内 部 举行 ,这 种 评审 
类 型 称 为 同行 评审 。 
4) 评审 成 功 的 因素 
评审 成 功 的 因素 包括 : 
。 每 次 评审 都 有 预先 明确 定义 的 目标 。 
针对 评审 目标 ,有 合适 的 评审 人 员 的 参与 。 
测试 人 员 参 加 评审 有 利于 为 后 续 测 试 工作 做 准备 。 
对 发 现 的 缺陷 持 欢迎 态度 ,并 客观 地 描述 缺陷 。 
能 够 正确 处 理 人 员 之 间 的 问题 以 及 心理 方面 的 问题 (比如 对 作者 而 言 , 能 让 他 觉得 
有 了 积极、 正面 的 体验 )。 
评审 应 该 在 一 种 信任 的 气氛 中 进行 ,并 且 结果 不 应 用 于 对 参与 者 的 评价 。 
* 采用 的 评审 技术 适合 于 要 达到 的 目标 、 软 件 工作 产品 的 类 型 和 级 别 以 及 参与 评审 的 
AB. 
* 选用 合适 的 检查 表 或 定义 合适 角色 ,可 以 提高 缺陷 识别 的 有 效 性 。 
。 提供 评审 技术 方面 的 培训 ,特别 是 针对 正式 的 评审 技术 ,比如 审查 。 
。 管理 层 对 良好 评审 过 程 的 支持 (如 在 项 目 计 划 中 安排 足够 的 时 间 来 进行 评审 活动 ) 。 
。 强调 学 习 和 过 程 的 改进 。 
5) 静态 分 析 的 工具 支持 
静态 分 析 的 目的 是 发 现 软件 源 代码 和 软件 模型 中 的 缺陷 。 静 态 分 析 的 执行 并 不 需要 使 
用 工具 去 实际 运行 被 测 软件 。 而 动态 测试 是 真正 运行 软件 的 代码 。 静 态 分 析 可 以 定位 那些 
在 测试 过 程 很 难 发 现 的 缺陷 。 与 评审 一 样 ,静态 分 析 通 常 发 现 的 是 缺陷 而 不 是 失效 。 静态 
分 析 工 具 能 够 分 析 程 序 代 码 ( 比 如 控制 流 和 数据 流 ) ,以 及 产生 如 HTML 和 XML 的 输出 。 
静态 分 析 的 好 处 如 下 : 
。 在 测试 执行 之 前 尽早 发 现 缺陷 。 
° 通过 度量 的 计算 (比如 高 复杂 性 测量 ) ,早期 警示 代码 和 设计 可 能 存在 问题 的 方面 。 
可 以 发 现在 动态 测试 过 程 不 容易 发 现 的 一 些 缺 陷 。 
可 以 发 现 软件 模块 之 间 的 相互 依赖 性 和 不 一 致 性 ,例如 链接 。 
° 改进 代码 和 设计 的 可 维护 性 。 
。 在 开发 过 程 中 学 习 经 验 教训 ,从 而 预防 缺陷 。 
通过 静态 分 析 工 具 能 够 发 现 的 典型 缺陷 如 下 : 
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引用 一 个 没有 定义 值 的 变量 。 

。 模块 和 组 件 之 间接 口 不 一 致 。 

。 从 未 使 用 的 变量 。 

。 不 可 达 代码 或 死 代码 。 

。 人 逻辑 上 的 遗漏 与 错误 (潜在 的 无 限 循环 ) 。 

+ 过 于 复杂 的 结构 。 

° 违背 编 程 规 则 。 

。 安全 漏洞 。 

。 代码 和 软件 模型 的 语法 错误 。 

开发 人 员 通 常 在 组 件 测试 和 集成 测试 之 前 或 期 间 ,或 当代 码 蔡 入 到 配置 管理 工具 时 使 
用 静态 分 析 工 具 ( 按 照 预 先 定义 的 规则 或 编程 规范 进行 检查 ) ,而 设计 人 员 在 软件 建 模 期 间 
也 使 用 静态 分 析 工 具 。 静 态 分 析 工 具 会 产生 大 量 的 警告 信息 ,需要 很 好 地 管理 这 些 信息 ,从 
而 有 效 地 使 用 静态 分 析 工 具 。 

编译 器 也 可 以 为 静态 分 析 提 供 一 些 帮 助 ,包括 度量 的 计算 。 

6) 动态 测试 技术 

动态 测试 (Dynamic testing) 是 指 通 过 运行 软件 来 检验 软件 的 动态 行为 和 运行 结果 的 正 
确 性 。 动 态 测试 技术 可 以 分 为 三 类 : 黑 盒 测试 . 白 盒 测试 和 基于 经 验 的 测试 。 

将 测试 技术 分 为 黑 盒 测试 与 白 盒 测 试 是 一 种 比较 传统 的 分 类 方法 。 黑 盒 测 试 设计 技术 
(也 称 为 基于 规格 说 明 的 测试 技术 ) 是 依据 分 析 测 试 基础 文档 来 选择 测试 条 件 、 测 试用 例 或 
测试 数据 的 技术 。 它 包括 了 功能 和 非 功能 的 测试 。 黑 盒 测试 ,顾名思义 ,不 需要 使 用 任何 关 
于 被 测 组 件 或 系统 的 内 部 结构 信息 。 白 盒 测试 是 基于 分 析 被 测 组 件 或 系统 的 结构 的 测试 技 
术 。 黑 盒 测试 和 白 盒 测试 也 可 以 与 基于 经 验 的 技术 结合 ,以 补充 开发 人 员 、 测 试 人 员 和 用 
户 的 经 验 , 从 而 决定 什么 应 该 被 测试 。 

有 些 技术 可 以 明确 地 归 为 单一 的 类 ,而 有 些 可 以 属于 不 同 的 类 别 。 

CD 白 盒 测试 。 

白 盒 测试 (white box testing) 又 称 基 于 结构 的 测试 或 者 迎 辑 驱动 测试 。 

白 盒 测试 将 测试 对 象 看 作 一 个 打开 的 盒子 。 利 用 和 白 盒 测 试 法 进行 动态 测试 时 ,需要 测 
试 软件 产品 的 内 部 结构 和 处 理 过 程 , 不 需 测试 软 件 产品 的 功能 。 

白 盒 测试 法 的 覆盖 标准 有 逻辑 覆盖 、 循 环 覆 盖 和 基本 路 径 覆 盖 。 其 中 逮 辑 覆盖 包括 语 
句 覆 盖 、 判 定 覆 盖 、 条 件 覆 盖 、 判 定 /条 件 覆 盖 、 条 件 组 合 覆盖 和 路 径 覆 盖 o 

白 盒 测试 是 知道 产品 内 部 工作 过 程 , 可 通过 测试 来 检测 产品 内 部 动作 是 否 按照 规格 说 
明 书 的 规定 正常 进行 ,按照 程序 内 部 的 结构 测试 程序 ,检验 程序 中 的 每 条 通路 是 否 都 能 按 预 
定 要 求 正确 工作 ,而 不 顾 它 的 功能 ,主要 用 于 软件 验证 。 

白 盒 测 试 常用 工具 有 Jtest、VcSmith、Jcontract、C++Test、CodeWizard、Logiscope 等 。 

基于 结构 的 测试 技术 具有 以 下 共同 特点 : 

。 根据 软件 的 结构 信息 设计 测试 用 例 ,比如 软件 代码 和 详细 设计 信息 。 

° 可 以 通过 已 有 的 测试 用 例 测量 软件 的 测试 覆盖 率 , 并 通过 系统 化 的 导出 设计 用 例 来 
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(2) 黑 盒 测试 。 

黑 盒 测试 (black box testing) ,又 称 基于 规格 说 明 的 测试 或 者 数据 驱动 测试 。 

黑 盒 测试 是 根据 软件 的 规格 对 软件 进行 的 测试 ,这 类 测试 不 考虑 软件 内 部 的 运作 原理 ， 
因此 软件 对 用 户 来 说 就 像 一 个 黑 盒子 。 

使 用 黑 盒 测试 技术 ,软件 测试 人 员 从 用 户 的 角度 ,通过 各 种 输入 并 观察 软件 的 各 种 输出 
结果 来 发 现 软件 存在 的 缺陷 ,而 不 关心 程序 具体 如 何 实现 。 

黑 盒 测试 常用 工具 有 AutoRunner, Winrunner 等 。 

基于 规格 说 明 的 测试 技术 具有 以 下 共同 特点 : 

。 使 用 正式 或 非 正式 的 模型 来 描述 需要 解决 的 问题 .软件 或 其 组 件 等 。 

。 根据 这 些 模型 ,可 以 系统 地 导出 测试 用 例 。 

白 盒 测试 技术 主要 用 于 单元 测试 ; 黑 盒 测 试 技术 主要 用 于 系统 测试 。 我 们 将 在 第 4 章 
和 第 6 章 详细 讲解 。 

(3) 基于 经 验 的 软件 测试 技术 。 

基于 经 验 的 测试 是 根据 测试 人 员 对 相似 的 应 用 或 技术 的 经 验 以 及 知识 和 直觉 来 进行 测 
试 的 ,如 果 是 用 来 协助 系统 化 的 测试 方法 ,这 些 技术 能 够 识别 一 些 正式 技术 不 能 获取 的 特殊 
测试 ,特别 是 当 用 在 正式 技术 之 后 会 更 有 效 。 但 是 ,这 种 技术 依据 测试 员 的 经 验 ,所 以 产生 
的 效果 会 有 极 大 的 不 同 。 

一 个 比较 常见 的 基于 经 验 的 技术 是 错误 推测 法 。 一 般 情况 下 ,测试 人 员 是 靠 经 验 来 预 
测 缺陷 。 错 误 推 测 法 的 一 个 结构 化 方法 是 列举 可 能 的 错误 ,并 设计 测试 来 攻击 这 些 错 误 ,这 
种 系统 的 方法 称 为 缺陷 攻击 。 可 以 根据 经 验 `. 已 有 的 缺陷 .失败 数据 以 及 有 关 软 件 失败 的 常 
识 等 方面 的 知识 来 设计 这 些 缺 陷 和 失效 的 列表 。 

探索 式 软件 测试 是 另 一 种 基于 经 验 的 软件 测试 技术 ,探索 式 软件 测试 是 指 依据 包含 测试 
目标 的 测试 章程 来 同时 进行 测试 设计 、 测 试 执行 .测试 记录 和 学 习 , 并 且 是 在 规定 时 间 内 进行 
的 。 这 种 方法 在 规格 说 明 较 少 或 不 完备 且 时 间 压 力 大 的 情况 下 使 用 更 有 帮助 ,或 者 作为 对 其 他 
更 为 正式 的 测试 的 增加 或 补充 。 它 可 以 作为 测试 过 程 中 的 检查 ,有 助 于 发 现 最 为 严重 的 缺陷 。 

基于 经 验 的 测试 技术 具有 以 下 共同 特点 : 

。 测试 用 例 根据 参与 人 员 的 经 验 和 知识 来 编写 。 

+ 测试 人 员 、 开 发 人 员 、 用 户 和 其 他 的 利益 相关 者 对 软件 、 软 件 使 用 和 环境 等 方面 所 掌 

握 的 知识 作为 信息 来 源 之 一 。 

* 对 可 能 存在 的 缺陷 及 其 分 布 情况 的 了 解 作为 另 一 个 信息 来 源 。 

(4) 基于 模型 的 软件 测试 技术 。 

基于 模型 的 测试 (model based testing, MBT) 是 一 种 根据 模型 来 设计 测试 的 高 级 测试 
方法 。 基 于 模型 的 测试 方法 支持 并 拓展 了 传统 测试 设计 技术 ,比如 我 们 熟悉 的 等 价 类 划分 、 
边界 值 分 析 、 决 策 表 、 状 态 转换 测试 和 用 例 测 试 等 传统 测试 设计 技术 。 基 于 模型 的 测试 的 基 
本 思想 是 通过 以 下 内 容 提高 测试 设计 和 测试 实现 活动 的 质量 和 效率 : 

。 基于 项 目的 测试 目标 设计 一 个 综合 的 MBT 模型 。 通 常 这 个 综合 的 MBT 模型 是 利 
用 工具 完成 的 。 

。 将 模型 作为 一 种 测试 设计 规格 说 明 提 供给 测试 工程 师 。 这 时 模型 应 该 包含 高 度 格 
式 化 和 详细 的 信息 ,这 样 才 能 保证 能 从 模型 自动 导出 测试 用 例 。 
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MBT 模型 及 其 工件 应 该 是 与 组 织 的 过 程 紧 密 结合 的 ,也 应 该 与 方法 ,技术 环境 、 工 具 ， 
以 及 任何 特定 的 生命 周期 过 程 紧密 结合 。 

7) 测试 技术 的 选择 

测试 技术 的 选择 基于 下 面 的 几 个 因素 ,包括 系统 类 型 、 法 律 法 规 标准 、 客 户 或 合同 的 需 
求 、 风 险 的 级 别 、 风 险 的 类 型 .测试 目标 、 文 档 的 可 用 性 、 测 试 员 的 技能 水 平 \. 时 间 和 成 本 预 
算 、 开 发 生命 周期 .用例 模型 和 以 前 发 现 各 类 缺陷 的 经 验 等 。 

有 些 测试 技术 适合 于 特定 的 环境 和 测试 级 别 ,而 有 些 则 适用 于 所 有 的 测试 级 别 。 

在 建立 测试 用 例 时 ,测试 人 员 通 常会 组 合 多 种 测试 技术 并 结合 流程 .规则 和 数据 驱动 技 
术 来 保证 对 测试 对 象 足够 的 覆盖 率 。 


1.4 测试 心理 学 与 职业 道德 


学 生 甲 逮 辑 能 力 较 强 ,学 习 编 程 类 的 课程 感到 得 心 应 手 ; 学 生 乙 逻辑 能 力 稍 差 ,学 习 编 
程 类 的 课程 感到 力不从心 。 我 们 来 听 听 他 们 是 怎样 讨论 软件 测试 的 。 

FEP: 程序 员 是 一 个 高 薪 职 位 ,工作 富有 挑战 性 ,我 将 来 要 做 一 个 程序 员 。 

FEL: 我 学 不 会 编程 ,只 能 做 一 个 测试 员 了 。 

学 生 甲 和 学 生 乙 在 学 校 的 校 企 合作 项 目 中 分 别 担任 程序 员 和 测试 员 。 学 生 乙 测试 软件 
时 发 现 了 一 个 软件 错误 。 

学 生 乙 : 学 生 甲 ,你 是 怎么 搞 的 ,程序 中 还 有 这 样 严重 的 错误 。 

学 生 甲 : 呵呵 。 

这 个 案例 反映 了 一 个 普遍 现象 ,其 中 涉及 测试 心理 学 和 职业 道德 问题 。 


1.4.1 测试 心理 学 


软件 测试 未 受到 重视 的 一 个 重要 原因 是 人 们 的 心理 因素 。 从 软件 系统 开发 者 的 角度 ， 
软件 开发 工作 的 目标 是 使 系统 能 够 运转 起 来 ,这 是 富有 刺激 性 和 创造 性 的 任务 。 当 付出 的 
精力 逐渐 变 为 成 果 时 ,人 们 不 愿 做 那些 后 续 的 既 麻 烦 又 可 能 否定 自己 成 果 的 测试 工作 ,也 不 
愿意 让 别人 给 自己 开发 的 软件 挑 毛病 。 正 如 Myers 所 说 的 那样 ,软件 测试 是 设法 从 程序 中 
找 错 的 破坏 性 过 程 。 测 试 人 员 和 开发 人 员 的 这 一 对 抗 心理 ,在 一 段 时 间 内 成 为 测试 工作 的 
障碍 , 极 大 地 影响 了 测试 技术 的 发 展 。 

在 测试 和 评审 中 使 用 的 思维 方式 ,与 在 项 目 分 析 和 开发 中 使 用 的 不 同 。 具 有 正确 思维 
方式 的 开发 人 员 可 以 测试 他 们 自己 写 的 代码 。 但 通常 将 此 职责 从 开发 人 员 分 离 给 测试 人 
员 , 有 助 于 开发 人 员 集 中 精力 ,并 且 具 有 以 下 额外 优势 ,例如 ,通过 培训 和 使 用 专业 的 测试 资 
源 获 得 独立 的 观点 。 独 立 测 试 可 以 应 用 于 任何 测试 级 别 。 

一 定 程度 的 独立 (可 以 避免 开发 人 员 对 自己 代码 的 偏爱 ) 通 常 可 以 更 加 高 效 地 发 现 软件 
缺陷 和 软件 存在 的 失效 。 但 独立 不 能 替代 对 软件 的 熟悉 和 经 验 ,开发 人 员 同 样 也 可 以 高 效 
地 在 他 们 自己 的 代码 中 找 出 很 多 缺陷 。 

测试 与 开发 独立 是 相对 的 ,可 以 列 出 如 下 独立 级 别 (从 低 到 高 ) : 

。 测试 由 软件 本 身 编 写 的 人 员 来 执行 (低级 别 的 独立 ) 。 
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* 测试 由 一 个 其 他 开发 人 员 ( 如 来 自 同 一 开发 小 组 ) 来 执行 。 
+ 测试 由 组 织 内 的 一 个 或 多 个 其 他 小 组 成 员 ( 如 独立 的 测试 小 组 ) 或 测试 专家 (如 可 用 
性 或 性 能 测试 专家 ) 来 执行 。 

+ 测试 由 来 自 其 他 组 织 或 其 他 公司 的 成 员 来 执行 (如 测试 外 包 或 其 他 外 部 组 织 的 鉴定 ) 。 

测试 的 目标 驱使 着 小 组 成 员 和 项 目的 活动 。 小 组 成 员 将 根据 管理 层 或 其 他 利益 相关 者 
设 定 的 目标 对 他 们 的 计划 进行 调整 ,比如 需要 发 现 更 多 的 缺陷 ,或 确认 软件 是 否 满足 其 目 
标 。 因 此 ,对 测试 的 目标 进行 清晰 的 设 定 是 非常 重要 的 。 

测试 过 程 中 发 现 的 失效 ,可 能 会 被 看 成 是 测试 员 对 产品 和 作者 的 指责 。 因 此 ,测试 通常 
被 认为 是 破坏 性 的 活动 ,即使 它 对 于 管理 产品 风险 非常 有 建设 性 作用 。 在 系统 中 发 现 失效 
需要 测试 员 具 有 一 颗 好 奇 心 .专业 的 怀疑 态度 一双 挑剔 的 眼睛 、 对 细节 的 关注 .与 开发 人 员 
良好 的 沟通 能 力 以 及 对 常见 的 错误 进行 判断 的 经 验 。 

假如 可 以 用 建设 性 的 态度 对 发 现 的 缺陷 或 失效 进行 沟通 ,就 可 以 避免 测试 员 、 分 析 人 
员 、 设 计 人 员 和 开发 人 员 之 间 的 不 愉快 。 这 个 道理 不 仅 适用 于 文档 的 评审 过 程 ,同样 也 适用 
于 测试 过 程 。 

在 以 建设 性 的 方式 讨论 缺陷 、 进 度 和 风险 时 ,测试 员 和 测试 的 负责 人 都 需要 具有 良好 的 
人 与 人 之 间 沟 通 的 能 力 。 对 于 软件 代码 或 文档 的 作者 ,缺陷 信息 可 以 帮助 他 们 来 提高 他 们 
的 技术 水 平 。 如 果 在 测试 阶段 发 现 和 修复 缺陷 ,就 可 以 为 后 期 (例如 在 正式 的 使 用 时 ) 节 省 
时 间 和 金钱 ,而 且 可 以 降低 风险 。 

沟通 方面 的 问题 经 常会 发 生 , 特 别 是 当 测 试 员 只 是 被 视 为 不 受 欢 迎 的 缺陷 消息 的 传递 
者 的 时 候 。 测 试 员 和 其 他 小 组 成 员 之 间 的 沟通 应 该 遵循 的 原则 如 下 : 
以 合作 而 不 是 争斗 的 方式 开始 项 目 , 时 时 提醒 项 目的 每 位 成 员 : 共同 目标 是 追求 高 
质量 的 产品 。 
对 产品 中 发 现 的 问题 以 中 性 的 和 以 事实 为 依据 的 方式 来 沟通 ,而 不 要 指责 引入 这 个 
问题 的 小 组 成 员 或 个 人 。 比 如 ,客观 而 实际 地 编写 缺陷 报告 和 评审 发 现 的 问题 。 
尽量 理解 其 他 成 员 的 感受 ,以 及 他 们 为 什么 会 有 这 种 反应 。 
确信 其 他 成 员 已 经 理解 你 的 描述 ,反之 亦 然 。 


1.4.2 职业 道德 


在 软件 测试 中 包含 了 使 个 人 可 以 获取 保密 的 ,授权 的 信息 。 为 保证 信息 规范 化 使 用 , 需 
要 遵循 必要 的 职业 道德 。ISTQB 借鉴 .引用 了 АСМ 和 IEEE 对 于 工程 师 道德 规范 ,陈述 职 
业 道 德 规范 如 下 : 

公共 一 一 认证 测试 工程 师 应 当 以 公众 利益 为 目标 。 

客户 和 雇主 一 一 在 保持 与 公众 利益 一 致 的 原则 下 ,认证 测试 工程 师 应 注意 满足 客户 和 
雇主 的 最 高 利益 。 

产品 一 一 认证 测试 工程 师 应 当 确 保 他 们 提供 的 (在 产品 和 系统 中 由 他 们 测试 的 ) 发 布 版 
本 符合 最 高 的 专业 标准 。 

判断 一 一 认证 测试 工程 师 应 当 维 护 他 们 职业 判断 的 完整 性 和 独立 性 。 

管理 一 一 认证 软件 测试 管理 人 员 和 测试 领导 人 员 应 赞成 和 促进 对 软件 测试 合乎 道德 规 
范 的 管理 。 
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专业 一 一 在 与 公众 利益 一 致 的 原则 下 ,认证 测试 工程 师 应 当 推进 其 专业 的 完整 性 和 
E23 
Fio 

同事 一 一 认证 测试 工程 师 对 其 同事 应 持平 等 互助 和 支持 的 态度 ,并 促进 与 软件 开发 人 
员 的 合作 。 

自我 一 一 认证 测试 工程 师 应 当 参 与 终生 职业 实践 的 学 习 , 并 促进 合乎 道德 的 职业 实践 
方法 。 


E 软件 测试 技术 的 发 展 趋势 


软件 测试 技术 随 着 软件 开发 技术 的 发 展 而 不 断 发 展 ,下 面 根据 网 络 上 搜集 的 资料 ,整理 
列 出 软件 测试 技术 的 一 些 发 展 趋势 。 


1.5.1 自动 化 软件 测试 技术 应 用 越 来 越 普 遍 


由 于 软件 测试 很 大 程度 上 是 一 种 重复 性 工作 ,这 种 重复 性 表现 在 同样 的 一 个 功能 点 或 
是 业务 流程 的 测试 需要 借助 于 不 同类 型 的 数据 驱动 而 执行 很 多 遍 。 同 时 ,由 于 某 一 个 功能 
模块 的 修改 有 可 能 影响 到 其 他 模块 ,因此 需要 对 可 能 影响 的 模块 进行 再 测试 (回归 测试 。 
回归 测试 可 以 执行 以 前 用 过 的 测试 用 例 。 另 外 ,自动 化 测试 工具 可 以 实现 人 们 用 手工 无 法 
实现 的 工作 ,如 负载 测试 工具 可 以 同时 模拟 成 千 上 万 的 用 户 并 发 操作 ,弥补 了 人 工 测试 的 不 
足 。 正 是 基于 以 上 原因 ,人 们 提出 了 自动 化 测试 技术 ,同时 计算 机 技术 的 发 展 也 为 自动 化 测 
试 的 实现 提供 了 条 件 。 目 前 比较 常见 的 自动 化 测试 技术 的 应 用 体现 为 功能 测试 工具 和 负载 
压力 测试 工具 。 
在 这 个 快速 变化 发 展 的 时 代 , 任 何 一 款 产品 想 要 在 市 场 具备 竞争 力 ,必须 能 够 快速 适应 
和 应 对 变化 ,要 求 产 品 开 发 过 程 具备 快速 持续 的 高 质量 交付 能 力 。 而 要 做 到 快速 持续 的 高 
质量 交付 ,自动 化 测试 将 必 不 可 少 。 同 时 ,自动 化 测试 也 不 是 用 代码 或 者 工具 替代 手工 测试 
那么 简单 ,具有 新 的 特点 和 趋势 : 针对 不 同 的 产品 开发 技术 框架 有 着 不 同 的 自动 化 技术 支 
持 , 针 对 不 同 的 业务 模式 需要 不 同 的 自动 化 测试 方案 ,从 而 使 得 自动 化 测试 有 着 更 好 的 可 读 
性 、 更 低 的 实现 成 本 、 更 高 的 运行 效率 和 更 有 效 的 覆盖 率 。 下 述 六 点 很 好 地 体现 了 自动 化 测 
试 的 新 特点 、 新 趋势 : 
。 针对 微服 务 的 消费 端 驱动 的 契约 测试 (consumer-driven contract testing), 有 助 于 解 
决 随 着 服务 增多 带 来 集成 测试 效率 低 和 不 稳定 的 问题 。 消 费 端 驱动 的 契约 测试 是 
成 熟 的 微服 务 测试 策略 中 的 核心 组 成 部 分 。 
。 专门 用 于 测试 和 验证 RESTful 服务 的 工具 REST-assured, 它 是 一 个 Java DSL, 使 
得 为 基于 HTTP 的 RESTful 服务 编写 测试 变 得 更 加 简单 。REST-assured 支持 不 
同类 型 的 REST 请 求 .并且 可 以 验证 请 求 从 API 返回 的 结果 。 它 同时 提供 了 JSON 
校 验 机 制 , 用 于 验证 返回 的 JSON 数据 是 符合 预期 的 。 
* Android 系统 功能 测试 工具 Espresso, 其 微小 的 内 核 API 隐藏 了 复杂 的 实现 细节 ， 
并 帮助 我 们 写 出 更 简洁 .快速 .可靠 的 测试 用 例 。 
* ThoughtWorks 开源 的 轻 量 级 跨 平台 测试 自动 化 工具 Gauge, 支 持 用 业务 语言 描述 


* 
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测试 用 例 ,支持 不 同 的 编程 语言 ,支持 所 支持 平台 的 并 行 执行 。 
* 用 于 针对 UI 的 自动 化 测试 构建 页 面 描述 对 象 的 Ruby FE Pageify, 该 工具 关注 更 快 
地 执行 测试 以 及 代码 的 可 读 性 ,并 可 以 很 好 地 配合 Webdriver 或 是 Capybara 使 用 。 
。 专门 用 于 iOS 应 用 开发 的 开源 行为 驱动 开发 测试 框架 Quick, 支 持 Swift, Objective-C, 
它 和 用 来 做 测试 验证 的 Nimble 92615. Quick 主要 用 于 Swift 和 Objective-C 程 
序 行为 的 验证 。 它 与 RSpec 和 Jasmine 具有 相同 的 语法 风格 ,基础 环境 很 容易 建 
XL. Quick 良好 的 结构 和 类 型 断言 使 得 测试 异步 程序 更 加 容易 。Quick 拥有 现成 的 
Swift 和 Objective-C 规范 文件 模板 ,开发 者 只 需 简 单 几 步 , 即 可 对 应 用 进行 快速 
测试 。 
工具 很 重要 ,设计 不 可 少 ! 自动 化 测试 工具 林林总总 ,选用 时 需要 重视 以 下 几 点 : 
。 综合 考虑 项 目 技术 栈 和 人 员 能 力 ,采用 合适 的 框架 来 实现 自动 化 。 
。 结合 测试 金字 塔 和 项 目 具体 情况 ,考虑 合适 的 测试 分 层 , 如 果 能 够 在 底层 测试 覆盖 
的 功能 点 一 定 不 要 放 到 上 层 的 端 到 端 测 试 来 覆盖 。 
。 自动 化 测试 用 例 设计 需要 考虑 业务 价值 ,尽量 从 用 户 真实 使 用 的 业务 流程 /业务 场 
景 出 发 来 设计 测试 用 例 , 让 自动 化 测试 优先 覆盖 到 最 关键 的 用 户 场 景 。 
。 同等 看 待 测试 代码 和 开发 代码 ,让 其 作为 产品 不 可 分 割 的 一 部 分 。 
但 就 自动 化 测试 技术 的 使 用 情况 来 看 ,大 多 数 公 司 是 使 用 负载 测试 工具 进行 性 能 测试 。 
由 于 国内 的 软件 开发 过 程 不 是 很 规范 ,软件 产品 相对 不 够 成 熟 , 大 多 数 软件 往往 不 具备 自动 
化 功能 测试 工具 应 用 的 条 件 。 功 能 自动 化 测试 工具 大 规模 的 应 用 还 需要 一 定 的 时 间 。 


1.5.2 测试 技术 不 断 细 分 


纵 观 测试 技术 在 中 国 的 发 展 历程 ,可 以 看 到 ,软件 测试 技术 正在 经 历 不断 细 分 的 过 程 ， 
这 种 现象 符合 事物 的 发 展 规律 。 因 为 人 们 对 事物 的 认识 总 是 由 浅 入 深 , 由 最 初 粗浅 的 认识 
到 越 来 越 系 统 化 。 

最 初 大 家 只 是 关注 软件 功能 测试 ,引进 了 功能 测试 技术 理论 ,如 大 家 所 熟知 的 等 价 类 划 
分 法 .边界 值 法 等 。 近 年 来 , 随 着 人 们 对 软件 质量 重视 程度 的 提高 ,人 们 不 再 满足 于 软件 功 
能 的 实现 ,更 看 重 于 软件 产品 或 系统 的 性 能 。 加 上 测试 工作 者 及 测试 厂商 的 努力 ,性 能 测试 
工具 得 到 了 较为 广泛 的 应 用 。 在 性 能 测试 方面 的 实践 不 断 得 到 积累 ,测试 工作 者 们 总 结 出 
在 性 能 测试 方面 的 一 些 理论 与 方法 ,如 负载 测试 .压力 测试 ,大 数据 量 测试 等 。 相 信 在 不 久 
的 将 来 ,在 性 能 测试 方面 ,还 会 有 新 的 理论 方法 补充 进来 。 除 此 之 外 ,根据 软件 应 用 领域 及 
软件 类 型 的 不 同 ,出 现 了 一 些 更 加 专业 的 测试 技术 类 型 。 下 面 挑选 几 种 主要 的 测试 技术 进 
行 介绍 。 


1. Web 应 用 软件 测试 


B/S 架构 的 大 行 其 道 , 催 生 了 人 们 对 Web 应 用 软件 测试 的 研究 。Web 应 用 软件 的 测 
试 继 承 了 传统 测试 方法 ,同时 结合 了 Web 应 用 的 特点 。 比 起 任何 其 他 类 型 的 应 用 , Web 应 
用 运行 在 更 多 的 硬件 和 软件 平台 上 .这 些 平台 的 性 质 可 在 任何 时 间 改 变 , 完 全 不 在 Web 应 
用 开发 人 员 的 知识 或 控制 之 内 。2003 年 电子 工业 出 版 社 引 进 了 美国 Hung Q. Nguyen 所 
著 的 《Web 应 用 测试 ),2009 年 由 刘 德 宝 所 著 的 《Web 项 目测 试 实战 ) 面 市 。 随 着 Web 应 
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用 的 不 断 发 展 , 也 同样 衍生 出 一 些 新 的 研究 方向 ,如 云 计算 测试 .针对 SASS 应 用 的 测试 等 。 
2. 手机 软件 测试 


出 现 手 机 软件 测试 这 个 研究 分 支 ,主要 是 因为 手机 在 中 国 应 用 特别 普遍 ,使 用 范围 很 
广 , 围 绕 手 机 所 出 现 的 软件 种 类 越 来 越 丰富 ,有 很 多 专门 从 事 手机 软件 的 开发 公司 ,于 是 自 
然而 然 出 现 了 一 批 手机 软件 测试 的 工程 师 。 同 时 由 于 手机 软件 的 特殊 性 ,如 使 用 一 些 专门 
的 操作 系统 ,加 上 手机 内 存 及 CPU 相对 较 小 等 特点 ,手机 软件 的 测试 有 其 特殊 的 技术 方 
法 ,2009 年 电子 工业 出 版 社 出 版 了 《手机 软件 测试 最 佳 实践 ) 一 书 ,手机 软件 测试 越 来 越 受 
到 大 家 的 关注 。 


3. 嵌入 式 软件 测试 


随 着 信息 技术 和 工业 领域 的 不 断 融 合 ,嵌入 式 系统 的 应 用 越 来 越 广泛 。 可 以 预言 ,敌人 
式 软件 将 有 更 为 广阔 的 发 展 空间 。 对 于 嵌入 式 软件 的 测试 也 将 有 着 很 大 的 市 场 需求 。 

由 于 髋 入 式 系统 的 自身 特点 ,如 实时 性 (Real-timing) ,内 存 不 丰富 、1/O 通道 少 、 开 发 工 
具 昂 贵 , 与 硬件 紧密 相关 、CPU 种 类 繁多 等 等 ,嵌入 式 软件 的 开发 和 测试 也 就 与 一 般 商 用 软 
件 的 开发 和 测试 策略 有 了 很 大 的 不 同 ,可 以 说 嵌入 式 软件 是 最 难 测 试 的 一 种 软件 。 


4. 安全 性 测试 


近 些 年 来 , 随 着 计算 机 网 络 的 迅速 发 展 和 软件 的 广泛 应 用 ,软件 的 安全 性 已 经 成 为 备 受 
关注 的 一 个 方面 ,渐渐 融入 人 们 的 生活 ,成 为 关系 到 金融 ,电力 ,交通 、 医 疗 、 政 府 以 及 军事 等 
各 个 领域 的 关键 问题 。 尤 其 在 当前 黑客 肆虐 .病毒 猩 狐 的 网 络 环境 下 , 越 来 越 多 的 软件 因为 
自身 存在 的 安全 漏洞 ,成 为 黑客 以 及 病毒 攻击 的 对 象 ,给 用 户 带 来 严重 的 安全 隐患 。 软 件 安 
全 漏洞 造成 的 重大 损失 以 及 还 在 不 断 增 长 的 漏洞 数量 使 人 们 已 经 开始 深刻 认识 到 软件 安全 
的 重要 性 。20 世纪 90 年 代 , 信 息 安全 学 者 、 计 算 机 安全 研究 人 员 就 开始 了 对 计算 机 安全 问 
题 的 研究 ,安全 性 测试 成 为 软件 测试 技术 的 一 个 重要 分 支 。 

安全 测试 贯穿 整个 软件 生命 周期 。 同 时 ,给 软件 测试 人 员 带 来 了 更 多 的 机 遇 和 挑战 ,要 
求 具备 更 多 的 安全 相关 知识 (其 中 还 包括 更 多 的 计算 机 基础 知识 ); 掌握 已 有 的 安全 测试 相 
关 技 术 , 从 而 在 软件 开发 的 各 个 阶段 做 好 安全 相关 的 分 析 和 测试 工作 。 尽 管 有 些 团 队 已 经 
将 安全 与 整个 开发 实践 结合 起 来 ,但 培养 每 个 人 在 每 个 阶段 的 安全 意识 是 相当 重要 的 ,探索 
新 的 安全 测试 技术 、 方 法 还 有 很 大 空间 。 

安全 测试 相关 的 技术 和 工具 有 很 多 ,例如 ,Bug bounties、 威 胁 建 模 (Threat Modeling) 、 
ZAP 和 Sleepy Puppy. 

Bug bounties 是 一 个 安全 漏洞 举报 奖励 制度 , 越 来 越 多 的 组 织 开 始 通过 Bug bounties 
鼓励 记录 常见 的 安全 相关 的 Bug ,帮助 提高 软件 质量 。 威 胁 建 模 是 一 组 技术 ,主要 从 防御 的 
角度 出 发 ,帮助 理解 和 识别 潜在 的 威胁 。 当 把 用 户 故事 变 为 “邪恶 用 户 故事 "时 ,这 样 的 做 法 
可 给 予 团队 一 个 可 控 且 高 效 的 方法 ,使 他 们 的 系统 更 加 安全 。 

ZED Attack Proxy (ZAP) 是 一 个 OWASP 的 项 目 ,允许 你 以 自动 化 的 方式 探测 已 有 站 
点 的 安全 漏洞 。 可 以 用 来 做 定期 的 安全 测试 ,或 者 集成 到 CD 的 Pipleline 中 提供 一 个 持续 
的 常规 安全 漏洞 检测 。 使 用 ZAP 这 样 的 工具 并 不 能 替换 掉 对 安全 的 仔细 思考 或 者 其 他 的 
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系统 测试 ,但 是 作为 一 个 保证 系统 更 安全 的 工具 ,还 是 很 值得 添加 到 你 的 工具 集 里 。 

Sleepy Puppy 是 Netflix 公司 近期 开源 的 一 款 盲 打 XSS 收集 框架 。 当 攻击 者 试图 入 侵 
第 二 层 系 统 时 ,这 个 框架 可 用 于 测试 目标 程序 的 XSS 漏洞 。XSS 漏洞 是 OWASP 的 Top10 
的 安全 威胁 ,Sleepy Puppy 可 以 用 来 同时 为 几 个 应 用 完成 自动 安全 扫描 。 它 可 以 自 定 义 讶 
打 方 式 ,简化 了 捕获 ,管理 和 跟踪 XSS 漏洞 的 过 程 。Sleepy Puppy 还 提供 了 API 供 ZAP 之 
类 的 漏洞 扫描 工具 集成 ,从 而 支持 自动 化 安全 扫描 。 


5. 可 靠 性 测试 


软件 可 靠 性 是 指 “ 在 规定 的 时 间 内 ,规定 的 条 件 下 ,软件 不 引起 系统 失效 的 能 力 , 其 概 
率 度量 称 为 软件 可 靠 度 "。 软 件 可 靠 性 测试 是 指 为 了 保证 和 验证 软件 的 可 靠 性 要 求 而 对 软 
件 进 行 的 测试 。 其 采用 的 是 按照 软件 运行 剖面 (对 软件 实际 使 用 情况 的 统计 规律 的 描述 ) 对 
软件 进行 随机 测试 的 测试 方法 。 

软件 可 靠 性 测试 不 同 于 硬件 可 靠 性 测试 ,这 主要 是 因为 二 者 失效 的 原因 不 同 。 硬 件 失 
效 一 般 是 由 于 元 器 件 的 老化 引起 的 ,因此 硬件 可 靠 性 测试 强调 随机 选取 多 个 相同 的 产品 , 统 
计 它 们 的 正常 运行 时 间 。 正 常 运行 的 平均 时 间 越 长 , 则 硬件 就 越 可 靠 。 软 件 失 效 是 由 设计 
缺陷 造成 的 ,软件 的 输入 决定 是 否 会 遇 到 软件 内 部 存在 的 故障 。 因 此 ,使 用 同样 一 组 输入 反 
复 测 试 软件 并 记录 其 失效 数据 是 没有 意义 的 。 在 软件 没有 改动 的 情况 下 ,这 种 数据 只 是 首 
次 记录 的 不 断 重 复 ,不 能 用 来 估计 软件 可 靠 性 。 软 件 可 靠 性 测试 强调 按 实际 使 用 的 概率 分 
布 随机 选择 输入 ,并 强调 测试 需求 的 覆盖 面 。 软 件 可 靠 性 测试 也 不 同 于 一 般 的 软件 功能 测 
试 。 相 比 之 下 ,软件 可 靠 性 测试 更 强调 测试 输入 与 典型 使 用 环境 输入 统计 特性 的 一 臻 ,强调 
对 功能 、 输 入 ,数据 域 及 其 相关 概率 的 先期 识别 。 测 试用 例 的 设计 策略 也 不 同 ,软件 可 靠 性 
测试 必须 按照 使 用 的 概率 分 布 随机 地 选择 测试 用 例 .这样 才 能 得 到 比较 准确 的 可 靠 性 估计 ， 
也 有 利于 找 出 对 软件 可 靠 性 影响 较 大 的 故障 。 


1.5.3 云 技术 、 容 器 化 和 开源 工具 使 得 测试 成 本 下 降 


测试 环境 的 准备 在 过 去 是 一 个 比较 麻烦 和 昂贵 的 事情 ,很 多 组 织 由 于 没有 条 件 准备 多 
个 测试 环境 ,导致 测试 只 能 在 有 限 的 环境 中 进行 ,从 而 可 能 遗漏 一 些 非常 重要 的 缺陷 ,测试 
的 成 本 和 代价 很 高 。 随 着 云 技术 的 发 展 ,多 个 测试 环境 不 再 需要 大 量 昂 贵 的 硬件 设备 来 支 
持 , 加 上 以 Docker 为 典范 的 容器 技术 生态 系统 也 在 逐步 成 长 和 成 熟 ,创建 和 复制 测试 环境 
变 得 更 加 简单 ,成 本 也 大 大 降低 。 


1. 云 测 试 平台 
云 测试 平台 如 雨后春笋 般 涵 现 ,下面 介绍 常见 的 几 种 。 


1) Sauce Labs(saucelabs. com) 

Sauce Labs 是 一 个 提供 自动 化 功能 测试 的 云 测试 服务 公司 , 它 的 一 个 吸引 人 的 地 方 就 
是 写 一 个 测试 可 以 测试 N 个 平台 的 M 个 浏览 器 的 Z 个 版 本 。2008 年 创立 于 旧金山 的 
Sauce Labs 开始 提供 网 站 测试 服务 ,四 年 后 业务 扩展 到 Android. iOS 和 Mac OS 应 用 。 
Sauce Labs 的 测试 平台 向 开发 者 提供 基于 云端 的 自动 化 测试 服务 ,帮助 开发 者 在 整个 开发 
周期 中 对 Web 和 App 应 用 的 Bug 进行 持续 测试 ,测试 范围 涵盖 超过 800 种 浏览 器 、 操 作 系 
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统 和 设备 组 合 。Salesforce、Lyft\Zendesk Intuit, Visa 和 Paypal 都 是 Sauce Labs 的 客户 。 

值得 一 提 的 是 ,从 Node.js 到 一 些 领先 的 持续 集成 系统 ,Sauce Labs 几乎 适用 于 所 有 
流行 的 开发 工具 。 在 平台 中 设置 好 项 目 后 ,开发 人 员 可 以 使 用 Selenium, Appium 或 Sauce 
Labs 支持 的 其 他 开源 自动 化 工具 执行 预 置 的 测试 。 

2) Xamarin Test Cloud(testcloud. xamarin. com) 

Xamarin Test Cloud 是 Xamarin 工具 包 中 的 工具 之 一 ,Xamarin 的 产品 简化 了 针对 多 
种 平台 的 应 用 开发 ,包括 10S、Android、Windows Phone 和 Mac App。 作 为 一 个 跨 平台 开发 
框架 ,Xamarin 有 很 多 优点 。 在 这 一 框架 内 ,开发 10S, Android, Windows Phone 和 Mac 
App 应 用 可 以 不 用 转 到 Eclipse 或 者 额外 购买 Mac 并 使 用 Xcode, 而 继续 在 Visual Studio 
之 中 使 用 C# 与 . NET Framework 进行 。 

Xamarin Test Cloud 的 主要 特点 如 下 : 

* 通过 Cucumber 用 C 和 Ruby 来 编写 测试 程序 。 

。 在 Xamarin Studio 或 Visual Studio 中 以 C# 编 写 测试 程序 。 

。 集成 标准 NUnit 测试 运行 器 。 

* iOS 和 Android 不 同 平台 间 可 共享 测试 代码 。 

Visual Studio Online 中 自动 运行 Xamarin Test Cloud, 并 创建 和 获得 工作 项 目 以 便 
你 了 解 需 要 修复 什么 问题 。 

通过 自 定义 的 编译 后 的 命令 来 与 TFS、Jenkins、TeamCity 或 任何 持续 集成 系统 进 
行 集成 。 

3) TestDroid(bitbar. com/testing) 

TestDroid 是 一 项 帮助 开发 者 从 事 手机 应 用 测试 的 云端 服务 。 由 Bitbar 公司 推出 ,该 
公司 获得 了 来 自 DFJ Esprit .Qualcomm Ventures 等 风险 投资 公司 的 300 万 美元 融资 。 

开发 者 们 可 以 将 开发 完毕 等 待 测试 的 应 用 上 传 到 TestDroid, 该 服务 提供 了 200 多 种 
不 同 移动 端 设备 ,以 供 测 试 ,包括 智能 手机 、 平 板 电 脑 甚 至 是 相机 。 一 些 知 名 公司 例如 
Evernote 和 Flipboard 已 经 开始 使 用 这 项 服务 。 尽 管 从 字面 意思 看 来 ,TestDroid 似乎 是 针 
对 Android 应 用 测试 ,实际 上 它 的 测试 范围 已 经 包括 了 iOS 和 HTML5。 

4) Google Cloud Test Cloud (https://firebase. google. cn) 

Google 为 构建 和 测试 提供 了 云 平台 ,其 中 的 Android 测试 实验 室 在 由 Google 托管 的 
虚拟 和 真 机 设备 上 为 你 的 应 用 运行 自动 化 和 自 定义 测试 。 在 整个 开发 生命 周期 中 使 用 
Firebase 测试 实验 室 来 查找 错误 和 不 一 致 的 地 方 ,这 样 就 可 以 在 各 种 设备 上 提供 优质 的 
体验 。 

5) AWS Device Farm (https://aws.amazon. com/device-farm/) 

AWS Device Farm 是 一 项 应 用 程序 测试 服务 ,让 你 可 以 立即 在 很 多 设备 上 测试 
Android iOS 和 Web 应 用 程序 并 与 之 交互 .或 者 在 设备 上 实时 地 重 现 问题 查看 视频 、 屏 幕 
截图 .日 志和 性 能 数据 ,以 便 在 推出 应 用 程序 前 查 明 和 解决 问题 并 提高 质量 。 

6) 贯 众 云 测试 (cloudtest. komect. com) 

贯 众 云 测试 是 中 国 移动 旗下 的 云 测 试 服务 平台 ,目前 拥有 超过 60 款 市 面 主流 终端 , 支 
持 Android 及 iOS 系统 。 提 供 兼容 性 测试 功能 测试 ,性 能 测试 ,稳定 性 测试 (12 小 时 ) 及 网 
络 场景 测试 服务 (2G/3GV4G) 。 缺 点 是 终端 数量 较 少 ,优点 是 功能 较为 全 面 , 且 基本 功能 都 
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是 免费 ,使 用 成 本 较 低 。 

7) TestBird(www. testbird. com) 

TestBird 最 初 是 从 手 游 测试 开始 起 步 , 在 手 游 圈 积累 了 很 高 的 知名 度 , 目 前 也 在 逐步 
向 App 测试 领域 进军 ,同时 TestBird 也 加 入 了 智能 硬件 的 测试 领域 。 不 仅 如 此 ,TestBird 
同时 也 开发 出 云 手机 平台 ,提供 3500 部 真 机 ,支持 Android 和 iOS, 帮 助 开发 者 和 测试 者 实 
现 远 程 真 机 调试 .自助 功能 测试 和 自动 回归 测试 。 

8) 腾讯 优 测 (utest. qq. com) 

腾讯 优 测 是 腾讯 旗下 的 云 测 试 服务 平台 ,拥有 超过 1000 款 测试 终端 ,机 型 数量 庞大 ,但 
仅 支 持 Android, 暂 不 支持 iOS 系统 。 提 供 兼 容 性 测试 服务 ,不 提供 性 能 测试 、 功 能 测试 及 
稳定 性 测试 服务 。 另 外 ,腾讯 优 测 还 提供 “ 云 手 机 ”服务 ,开发 者 可 以 远程 控制 测试 终端 , 实 
时 查看 App 安装 、 运 行 效 果 。 

9) Testin(www. testin. cn) 

Testin 是 国内 较 早 涉足 云 测 试 领域 的 公司 之 一 。Testin 在 云端 部 署 了 300 多 款 、1000 
多 部 测试 终端 ,终端 种 类 及 数量 都 比较 全 面 ,支持 Android 与 iOS 系统 。 

10) 百度 MTC(mtc. baidu. com) 

百度 MTC 是 百度 开放 平台 旗下 的 移动 云 测试 中 心 ,提供 超过 500 款 热门 机 型 ,目前 只 
支持 Android 系统 , 暂 不 支持 IOS 系统 。 提 供 的 测试 服务 种 类 有 兼容 性 测试 ,性 能 测试 、 功 
能 测试 ,并且 提供 了 脚本 录制 工具 ,类 似 Testin, 但 脚本 录制 工具 更 新 速度 较 慢 。 

11) 阿里 MQCCmqc. aliyun. com) 

阿里 MQC 是 阿里 巴巴 旗下 的 移动 测试 平台 ,提供 上 百 款 测试 终端 ,支持 Android 及 
iOS 系统 。 提 供 兼 容 性 测试 .功能 测试 .性 能 测试 以 及 稳定 性 测试 (1 小 时 )。 测 试 脚本 需 使 
用 Robotium 或 Appium 测试 框架 编写 ,难度 较 高 。MQC 也 提供 了 远程 的 真 机 调试 ,功能 
与 腾讯 优 测 类 似 。 


2. 开源 测试 工具 


大 量 开源 测试 工具 的 出 现 , 而 且 这 些 工 具 往 往 都 是 轻 量 级 的 、 简 单 易 用 ,相对 于 那些 重 
量 级 的 昂贵 的 测试 工具 更 容易 被 人 们 接受 。 有 了 这 些 开 源 工具 的 帮助 ,测试 工作 将 更 加 全 
面 、 真 实地 覆盖 到 要 测试 的 平台 、 环 境 和 数据 ,将 会 加 快 测试 速度 、 降 低 测试 成 本 。 更 重要 的 
一 点 ,有 了 这 些 工 具 , 让 测试 人 员 能 有 更 多 的 时 间 来 做 测试 设计 和 探索 式 软 件 测试 等 更 有 挑 
战 性 的 事情 ,使 得 测试 工作 变 得 更 加 有 趣 。 

开源 工具 有 很 多 ,例如 Mountebank、Postman、Browsersync、Hamms、Gor 和 ievms ^f, 

在 企业 级 应 用 中 ,对 组 件 进行 良好 的 测试 至 关 重 要 ,尤其 是 对 于 服务 的 分 离 和 自动 化 部 
署 这 两 个 关系 到 微服 务 架 构 是 否 成 功 的 关键 因素 ,需要 更 合适 的 工具 对 其 进行 测试 。 

Mountebank 就 是 一 个 用 于 组 件 测试 的 轻 量 级 测试 工具 ,可 以 被 用 于 对 HTTP, 
HTTPS、SMTP 和 TCP 进行 模拟 (mock) 和 打桩 (stub) 。 

Postman 是 一 个 在 Chrome 中 使 用 的 REST 客户 端 插件 ,通过 Postman, 可 以 创建 请 求 
并 且 分 析 服 务 器 端 返回 的 信息 。 这 个 工具 在 开发 新 的 API 或 者 实现 对 于 已 有 API 的 客户 
端 访问 代码 时 非常 有 用 。Postman 支持 OAuthl 和 OAuth2, 并 且 对 于 返回 的 JSON 和 
XML 数据 都 会 进行 排版 。 通 过 使 用 Postman, 可 以 查看 通过 Postman 之 前 发 起 过 的 请 求 ， 
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并 且 可 以 非常 友好 地 编辑 测试 数据 去 测试 API 在 不 同 请 求 下 的 返回 内 容 。 

随 着 网 站 应 用 所 支持 设备 的 增多 , 花 在 跨 设备 测试 上 的 代价 也 在 不 断 增 大 。Browsersync 
能 够 通过 同步 多 个 移动 设备 或 桌面 浏览 器 上 的 手工 浏览 器 测试 , 极 大 地 降低 跨 浏览 器 测试 的 
代价 。 通 过 提供 命令 行 工 具 以 及 UI 界面 ,Browsersync 对 CI 构建 非常 友好 ,并 且 能 够 自动 化 
像 填写 表单 这 样 的 重复 任务 。 

在 软件 开发 领域 ,盲目 地 假设 网 络 总 是 可 靠 , 服 务 器 总 是 能 够 快速 并 正确 地 响应 导致 了 
许多 失败 的 案例 。Hamms 可 以 模拟 一 个 行为 损坏 的 HTTP 服务 器 ,和 触发 一 系列 的 失败 , 包 
括 连接 失败 ,或 者 响应 缓慢 ,或 者 畸形 的 响应 ,从 而 帮助 我 们 更 优雅 地 测试 软件 在 处 理 异常 
时 的 反应 。 

Gor 可 以 实时 捕获 线 上 HTTP 请 求 ,并 在 测试 环境 中 重 放 这 些 HTTP 请 求 , 以 帮助 我 
们 使 用 这 些 产 品 环境 数据 来 持续 测试 系统 。 使 用 它 之 后 可 以 大 大 提高 我 们 在 产品 部 署 、 配 
署 修 改 或 者 基础 架构 变化 时 的 信心 。 

尽管 下 浏览 器 的 使 用 量 日 益 萎缩 ,但 对 很 多 产品 而 言 ,IE 浏览 器 的 用 户 群 依然 不 可 忽 
视 , 浏 览 器 兼容 性 仍然 需要 测试 。 这 对 于 喜欢 使 用 基于 UNIX 的 操作 系统 进行 开发 的 人 来 
说 还 是 件 麻 烦 事 。 为 了 帮助 解决 这 个 难题 ,ievms 提供 了 实用 的 脚本 来 自动 设置 不 同 的 
Windows 虚拟 机 镜像 来 测试 从 IE6 到 Microsoft Edge 的 各 种 版 本 浏览 器 。 


1.5.4 测试 驱动 开发 


盖 房 子 的 时 候 , 工 人 师傅 砌 墙 ,会 先 用 柱子 拉 上 线 , 以 使 砖 能 够 又 得 笔直 ,因为 又 砖 的 时 
候 都 是 以 这 根 线 为 基准 的 。 软 件 开 发 能 否 像 这 样 , 先 写 测试 代码 ,就 像 工 人 师傅 先 用 桩 子 拉 
上 线 , 然 后 编码 的 时 候 以 此 为 基准 ,只 编写 符合 这 个 测试 的 功能 代码 。 

一 个 新 手 或 菜鸟 级 的 小 师傅 ,可 能 不 知道 拉线 ,而 是 直接 把 砖 往 上 人 又 ,又 了 一 些 之 后 再 
看 是 否 笔直 ,这 时 候 可 能 会 用 一 根 线 , 量 一 下 砌 好 的 墙 是 否 笔直 ,如 果 不 直 再 敲 敲 打 打 进行 
校正 。 使 用 传统 的 软件 开发 过 程 就 像 这 样 , 先 编码 ,编码 完成 之 后 才 写 测试 程序 ,以 此 检验 
已 写 的 代码 是 否 正确 ,如 果 有 错误 再 一 点 点 修改 。 

上 述 盖 房 子 的 例子 描述 了 一 个 重要 概念 一 一 测试 驱动 开发 (Test-Driven Development, 
简称 TDD) , 它 是 一 种 不 同 于 传统 软件 开发 流程 的 新 型 开发 方法 。 它 要 求 在 编写 某 个 功能 
的 代码 之 前 先 编写 测试 代码 ,然后 只 编写 使 测试 通过 的 功能 代码 ,通过 测试 来 推动 整个 开发 
的 进行 。 这 有 助 于 编写 简洁 可 用 和 高 质量 的 代码 ,并 加 速 开 发 过 程 。 

测试 驱动 开发 不 是 一 种 测试 技术 , 它 是 一 种 分 析 技 术 、 设 计 技术 ,更 是 一 种 组 织 所 有 开 
发 活动 的 技术 。 相 对 于 传统 的 软件 开发 方法 , 它 具 有 以 下 优势 : 

。 TDD 根据 客户 需求 编写 测试 用 例 , 对 功能 的 过 程 和 接口 都 进行 了 设计 ,而 且 这 种 从 

使 用 者 角度 对 代码 进行 的 设计 通常 更 符合 后 期 开发 的 需求 。 因 为 关注 用 户 反 馈 , 可 
以 及 时 响应 需求 变更 ,同时 ,因为 从 使 用 者 角度 出 发 的 简单 设计 ,也 可 以 更 快 地 适应 
变化 。 

° 出 于 易 测试 和 测试 独立 性 的 要 求 , 促 使 我 们 实现 松 斐 合 的 设计 ,并 更 多 地 依赖 接口 

而 非 具体 的 类 ,提高 系统 的 可 扩展 性 和 抗 变性 。TDD 明显 地 缩短 了 设计 决策 的 反 
馈 循环 ,使 我 们 在 几 秒 或 几 分 钟 之 内 就 能 获得 反馈 。 
* 将 测试 工作 提 到 编码 之 前 ,并 频繁 地 运行 所 有 测试 ,可 以 尽量 地 避免 错误 和 尽早 地 
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发 现 错误 , 极 大 地 降低 了 后 续 测 试 及 修复 的 成 本 ,提高 代码 的 质量 。 在 测试 的 保护 
下 ,不 断 重 构 代码 ,以 消除 重复 设计 ,优化 设计 结构 ,提高 代码 的 重用 性 ,从 而 提高 软 
件 产品 的 质量 。 
TDD 提供 了 持续 的 回归 测试 ,使 我 们 拥有 重 构 的 勇气 ,因为 代码 的 改动 导致 系统 其 
他 部 分 产生 任何 异常 ,测试 都 会 立刻 通知 我 们 。 完 整 的 测试 会 帮助 我 们 持续 地 跟踪 
整个 系统 的 状态 ,因此 我 们 就 不 需要 担心 会 产生 什么 不 可 预知 的 副作用 了 。 
TDD 所 产生 的 单元 测试 代码 就 是 最 完美 的 开发 者 文档 ,它们 展示 了 所 有 的 API 是 
如 何 使 用 以 及 是 如 何 运作 的 ,而 且 它 们 与 工作 代码 保持 同步 ,永远 是 最 新 的 。 
TDD 可 以 减轻 压力 .降低 忧虑 、 提 高 我 们 对 代码 的 信心 .使 我 们 拥有 重 构 的 勇气 ,这 
些 都 是 快乐 工作 的 重要 前 提 。 

测试 驱动 开发 的 技术 已 得 到 越 来 越 广泛 的 重视 ,但 由 于 发 展 时 间 不 长 ,相关 应 用 并 不 是 
很 成 熟 。 现 今 越 来 越 多 的 公司 都 在 尝试 进行 测试 驱动 开发 ,但 由 于 测试 驱动 开发 对 开发 人 
员 要 求 比 较 高 ,更 与 开发 人 员 的 传统 思维 习惯 相 违背 ,因此 实践 起 来 有 一 定 困难 。 美 国 不 少 
著名 软件 公司 如 IBM 很 早 就 开始 向 敏捷 转型 ,在 此 过 程 中 ,TDD 通常 是 最 重要 也 最 艰难 的 一 
个 ,正如 IBM 开发 转型 部 门 副 总 裁 Sue Mckinney 所 言 : 测试 驱动 开发 前 景 非常 诱 人 ,但 是 “在 
这 个 过 程 中 我 们 的 付出 可 能 也 是 最 多 的 。 " Forrester 的 高 级 分 析 师 Dave West 认为 : 测试 驱动 
开发 就 像 是 “圣杯 ”, 但 是 “如 果 能 达到 这 个 目标 ,付出 再 多 的 辛苦 也 是 值得 的 。” 

TDD 的 兴起 说 明 软 件 测试 在 软件 开发 过 程 中 的 作用 越 来 越 重 要 。 


1.5.5 DevOps 越 来 越 流 行 


DevOps 的 含义 是 开发 运 维 质量 保证 (Development and Operations, DevOps) 的 融合 。 
当代 软件 企业 或 团队 的 主要 目标 是 按时 交付 符合 质量 要 求 的 软件 产品 ,人 们 逐渐 认识 到 开 
发 .测试 .交付 的 深度 融合 有 助 于 实现 组 织 的 目标 。DevOps 重视 软件 开发 人 员 和 运 维 人 员 
的 沟通 合作 ,通过 自动 化 流程 来 使 得 软件 构建 、 测 试 . 发 布 更 加 快捷 、 频 繁 和 可 靠 。DevOps 
希望 做 到 的 是 软件 产品 交付 过 程 中 IT 工具 链 的 打通 ,使 得 各 个 团队 减少 时 间 损 耗 ,更 加 高 
效 地 协同 工作 。 互 联网 巨头 如 Google、Facebook、Amazon、LinkedIn、Netflix、Airbnb, 传 统 
软件 公司 如 Adobe, ІВМ, Microsoft, SAP 等 ,或 者 网 络 业务 非 核心 企业 如 苹果 、 沃 尔 玛 、 索 
尼 影 视 娱乐 .星巴克 等 都 在 采用 DevOps 或 提供 相关 支持 产品 。 

DevOps 越 来 越 深 入 人 心 ,DevOps 强化 了 测试 先行 (测试 驱动 开发 ) ,测试 和 开发 同步 
进行 ,持续 开发 .持续 测试 .持续 交付 ,是 一 种 软件 开发 文化 的 转变 。 云 技术 的 应 用 .DevOps 
工具 的 出 现 为 DevOps 添上 了 一 双 翅 膀 , 使 得 DevOps 日 益 成 熟 ,DevOps 将 越 来 越 流行 。 


1.5.6 探索 式 软件 测试 


探索 式 测试 可 以 说 是 一 种 测试 思维 技术 。 它 没有 很 多 实际 的 测试 方法 .技术 和 工具 ,但 
是 所 有 测试 人 员 都 应 该 掌握 的 一 种 测试 思维 方式 。 探 索性 强调 测试 人 员 的 主观 能 动 性 , 抛 
弃 繁 杂 的 测试 计划 和 测试 用 例 设计 过 程 ,强调 在 碰 到 问题 时 及 时 改变 测试 策略 。 

2010 年 清华 大 学 出 版 社 出 版 的 (探索 式 软件 测试 ) 全 面 地 介绍 了 探索 式 软件 测试 ,作者 
ЖИ ИТ - 惠 特 克 (James Whittaker) Е Microsoft 和 Google 从 事 软 件 测试 工作 ,而 Microsoft 和 
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Google 这 两 家 著名 公司 在 软件 测试 领域 都 有 不 俗 的 表现 。 惠 特 克 还 是 基于 模型 的 软件 测 
试 领域 的 先驱 。 


1.5.7 基于 模型 的 软件 测试 


基于 模型 的 测试 (Model Based Testing. MBT) 基 于 模型 分 析 设 计 思 想 在 测试 领域 的 应 
用 ,模型 的 引入 可 有 效 提 升 测试 分 析 设计 的 质量 和 效率 ,并 对 前 端的 需求 分 析 , 甚 至 后 端的 
测试 执行 均 产 生 深刻 影响 。 

ISTQB 有 专门 的 基于 模型 的 测试 大 纲 。Microsoft 公司 提供 了 基于 模型 的 测试 (MBT) 
工具 Spec Explorer, 华 为 公司 在 2014 年 TOP100 全 球 软件 案例 研究 峰会 上 报告 了 华为 的 
基于 模型 测试 的 实践 。 

基于 模型 的 测试 工具 有 Spec Explorer, Matelo,Conformiq Qtronic.Graphwalker 等 。 


1. Spec Explorer 


Spec Explorer 是 Microsoft 发 布 的 一 款 与 Visual Studio 紧密 整合 的 МВТ TH., 用 户 
可 以 通过 Spec Explorer 对 一 个 软件 系统 的 期 望 行为 进行 建 模 , 并 自动 生成 能 够 在 Visual 
Studio 测试 框架 下 运行 的 测试 代码 。 模 型 可 以 用 当前 主流 的 程序 设计 语言 CF ЖЖ. 然后 
通过 Cord 语言 脚本 对 模型 进行 配置 和 裁剪 。 

详 见 官网 : https://msdn. microsoft. com/en-us/library/ee620411. aspx, 


2. Matelo 


Matelo 是 一 个 基于 马尔 可 夫 链 模型 的 测试 工具 ,来 源 于 欧盟 的 一 个 项 目 。Matelo 基于 
马尔 可 夫 链 模型 和 静态 测试 方法 来 自动 构建 测试 用 例 , 支持 结构 分 析 并 生成 质量 报告 ,可 
以 在 软件 开发 .测试 过 程 中 精确 评估 软件 的 可 靠 性 和 性 能 。 当 生成 状态 机 图 后 , 可 使 用 用 
户 定义 的 方式 自动 计算 状态 之 间 的 迁移 , 进而 对 可 靠 性 进行 评估 。 

详 见 官网 http://www. all4tec. com/matelo。 


3. Conformiq Qtronic 


Conformiq Qtronic 是 一 个 用 于 艇 入 式 软 件 开 发 、 测 试 的 МВТ 工具 。Conformiq 
Qtronic 基于 UML 模型 ,关注 自动 化 测试 .执行 和 分 析 , 使 用 C/C++ .C # 和 Java 作为 建 模 
语言 。 根 据 测试 部 署 的 API 插件 可 以 采用 不 同 的 方式 执行 测试 。Conformiq Qtronic 测试 
生成 器 使 用 ОМІ, 状态 机 作为 测试 模型 ,自动 执行 测试 .生成 报告 。 确 定 了 UML 状态 图 
Jii» Conformiq 会 进行 模型 分 析 , 生成 测试 用 例 ， 对 模型 各 个 方面 进行 覆盖 。 此 外 ， 
Conformiq 还 可 以 对 非 确定 行为 生成 测试 用 例 。 

详 见 官网 https://www. conformiq. com/。 


4. GraphWalker 


GraphWalker 是 一 个 开源 的 基于 模型 的 测试 自动 化 工具 。 它 使 用 有 向 图 表示 测试 模 
型 ,依据 测试 模型 和 生成 规则 生成 测试 用 例 。 
详 见 官网 http://graphwalker. github. io/。 
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阅读 如 下 材料 ,并 按 步骤 做 ,体验 基于 模型 的 测试 。 

E 阅读 材料 

Spec Explorer 是 Microsoft 的 基于 模型 的 测试 (MBT) 工具 , 它 扩 展 了 Visual Studio， 
提供 高 度 集成 的 开发 环境 ,可 以 创建 行为 模型 。 它 也 是 图 形 分 析 工 具 , 可 用 于 检查 这 些 模型 
的 有 效 性 以 及 基于 这 些 模型 生成 测试 用 例 。 

使 用 基于 模型 的 测试 有 利 有 疯 。 最 明显 的 好 处 是 ,在 完成 可 测试 的 模型 后 , 按 一 下 按钮 
就 能 生成 测试 用 例 。 此 外 ,模型 必须 预先 形式 化 ,这 样 才能 实现 对 需求 不 一 致 的 早期 检测 ， 
帮助 团队 在 预期 行为 方面 保持 正确 。 请 注意 ,编写 手动 测试 用 例 时 ,已 经 有 “模型 ”, 但 它 没 
有 形式 化 ,只 是 存在 于 测试 者 的 脑海 中 。MBT 迫使 测试 团队 清晰 地 传达 出 其 有 关系 统 行为 
的 预期 ,并 使 用 清楚 的 结构 将 这 些 预期 编写 出 来 。 

另 一 个 明显 的 优点 是 项 目 维护 成 本 较 低 。 系 统 行为 的 更 改 或 新 增 功能 可 通过 更 新 模型 
反映 出 来 ,这 通常 比 逐 个 更 改 手动 测试 用 例 简 单 得 多 。 有 时 ,仅仅 确定 需要 更 改 的 测试 用 例 
就 是 一 项 非常 耗 时 的 任务 。 请 注意 ,模型 编写 也 是 独立 于 实现 或 实际 测试 的 工作 。 这 就 是 
说 ,团队 中 的 不 同 成 员 可 以 同时 进行 不 同 的 任务 。 

缺点 是 经 常 需 要 进行 思维 调整 。 这 可 能 是 这 个 方法 的 重大 挑战 之 一 。 大 家 都 知道 的 一 
个 最 重要 的 问题 是 : IT 从 业者 没有 时 间 尝 试 新 工具 ,使 用 这 个 方法 的 学 习 曲 线 不 容 忽 视 。 
应 用 МВТ 可 能 还 需要 进行 一 些 流程 更 改 , 这 也 可 能 造成 一 些 阻碍 ,具体 取决 于 团队 。 

另 一 个 不 利之 处 是 ,与 手动 编写 的 传统 测试 用 例 相 比 ,必须 提前 进行 更 多 工作 ,因此 需 
要 花 更 多 时 间 才 能 生成 第 一 个 测试 用 例 。 另 外 ,测试 项 目 需要 有 足够 的 复杂 度 , 才 值 得 进行 
投资 。 

幸运 的 是 ,我 们 认为 有 几 条 经 验 规则 可 帮助 确定 何 时 适合 使 用 MBT。 第 一 个 特征 
是 ,系统 状态 集 无 限 , 可 以 用 不 同 的 方式 满足 需求 。 系 统 是 反应 式 或 分 布 式 , 或 具有 异步 
或 非 确定 性 交互 的 系统 ,这 是 另 一 个 特征 。 另 外 ,如 果 方 法 有 很 多 复杂 参数 ,也 说 明 适 合 
用 MBT。 

如 果 符 合 这 些 条 件 ,MBT 都 有 重大 意义 ,可 以 节省 大 量 测试 工作 。Microsoft Blueline 
是 这 方面 的 示例 ,在 这 个 项 目 中 , 数 百 个 协议 验证 为 Windows 协议 遵从 性 计划 的 一 部 分 。 
在 这 个 项 目 中 ,使 用 Spec Explorer 来 验证 实际 协议 行为 的 协议 文档 的 技术 准确 性 。 这 是 繁 
重 的 工作 ,Microsoft 花费 了 250 个 人 年 进行 测试 。Microsoft Research 验证 了 一 项 统计 信 
息 研究 ,该 项 研究 表明 ,使 用 MBT 为 Microsoft 节省 了 50 个 人 年 的 测试 工作 , 换 句 话说 ， 
与 传统 测试 方法 相 比 ,省 去 了 大 约 20% 的 工作 。 

基于 模型 的 测试 是 非常 强大 的 方法 ,在 传统 测试 方法 的 基础 上 增加 了 一 种 系统 的 方法 。 
Spec Explorer 是 成 熟 的 工具 , 它 在 高 度 集 成 .最 先进 的 开发 环境 中 使 用 МВТ 概念 ,并 且 是 
免费 的 。 

Spec Explorer 2010 的 下 载 地 址 : https://marketplace. visualstudio. com/items? 
itemName= SpecExplorerTeam. SpecExplorer2010VisualStudioPowerTool-5089 


42, 软件 测试 实战 教程 
N 


СЄ 操作 步骤 

Spec Explorer 2010 是 Visual Studio 的 插件 ,需要 先 安装 Visual Studio 2010 或 2012, 
Spec Explorer 2010 安装 成 功 后 在 Visual Studio 的 主 菜单 中 将 增加 Spec Explorer 菜单 项 。 

以 下 以 Visual Studio 2010 为 例 介绍 具体 过 程 。 首 先 在 Visual Studio 2010 中 ,新建 项 
H Test-Spec Explore Model, 如 图 1.11 所 示 。 


4 Visual ce 
Windows 
Web 
t Office 
Cloud 
Reporting 
» SharePoint 

Silverlight 


WCF 


Create a Spec Explorer Model 


c\users\lenovo\documents\visual studio 2010\Projects ` 


图 1.11 f£ Visual Studio 中 新 建 项 目 


输入 项 目 名 称 , 单 击 * 确 定 ” 按 钮 ,如 图 1. 12 所 示 。 
Spec Explorer Model Wizard (Page 1 of 2) — 


© Static Spec Explorer Model 
Create projects to model static systen 


© Instance-Based Spec Explorer Model | 


Create projects to model instance-based system, typically а set of components 
with each other or with a third party 


© Guided Spec Explorer Model 
Create projects following the interactive guidance provided by Spec Explorer 


(enc) (ieget) ( nas |] саса 


图 1. 12 选择 模型 项 目 类 型 
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选择 Guided Spec Explorer Model, 单 击 Next 按钮 ,如 图 1. 13 所 示 。 


2 Spec Explorer Model Wizard (Page 2 of 2) 


Model Type 


[F] Model Project 
[Г] Sanple System Under Test Project 
The sample system which you intend to test 


[V] Test Suite Project 
The test project which contains the test suite generated by your model 


图 1.13 指定 将 要 创建 的 项 目 
选择 Test Suite Project, Finish 按钮 ,如 图 1.14 Bras. 


Siete Mh Ved навая ER O 0000 tecla 


Make sure the project contain їз. 
cord seript has а reference о the < Dispecteporers.Testsuite 
implementation or adapter ааш 

Steps 
if you know the namespaces for 

your implementation, add them in 
"using! clauses to your Cord script 


Optional] 


2. Declare a config in your Cord script. 


3.Import action declarations to the 
t config to represent methods and 
events in the implementation. 


! Example 


图 1.14 新 建 项 目 完成 后 的 界面 


在 新 建 的 项 目 中 ,完成 如 下 步骤 。 
测试 驱动 开发 时 的 测试 步骤 如 下 : 


1. 声明 操作 


(1) 在 Cord 脚本 文件 中 声明 config。 
(2) 增加 操作 声明 到 config, 表 示 被 测 系统 (SUT) 的 方法 和 事件 。 
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config Main 

t 
action abstract static void CalculatorAdapter.Max(int x, int y); 
action abstract event static void CalculatorAdapter.Show(int z); 


2. 编写 模型 规则 


CD 在 C# 文 件 中 创建 类 和 字段 ,用 于 保存 状态 数据 。 
(2) 在 config 中 为 操作 声明 规则 方法 。 
(3) 编写 方法 体 。 


using Microsoft. Modeling; 
namespace Calculator 


{ 
static class ModelProgram 


{ 
static int s; //state variable 
[Rule(Action = "Max(x, y)")] 
static void Max( int x, int y) //rule method 
{ 
8 = x>y? x: y; 
) 
[Rule(Action = "Show(z)")] 
static void Show(int z) //rule method 
{ 


Condition. IsTrue(z == s); 


} 
} 


3. 选择 场景 


(1) 在 Cord 脚本 中 创建 模型 程序 机 。 
(2) 创建 一 个 或 多 个 场景 机 ,用 于 表示 你 想 要 测试 的 行为 集合 (可 选 ) 。 
(3) 模型 程序 和 场景 结合 提取 选择 的 行为 (可 选 ) 。 


4. 组 合 参数 值 ( 可 选 ) 


CD 增加 一 个 config 集成 了 一 个 config( 这 个 config 使 用 参数 组 合 包含 了 操作 ) 。 
(2) 在 新 增 的 config 中 复制 操作 的 声明 (你 将 为 其 提供 组 合 ) 。 
(3) 为 每 个 声明 增加 where 构造 。 


config CombinationConfig : Main //extended config for combinations 
{ 
action abstract static void CalculatorAdapter. Max( int x, int y) 
where (. 
Condition.In(x, -1, 0, 1); 
Condition. In(y, 2, 3); 
Combination. Interaction(x); 
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Combination. Interaction(y); 
Combination. Isolated(x == -1); 
ВЕ 
} 
(4) 从 组 合 config 中 构造 一 个 或 多 个 模型 程序 ,或 替换 现 有 的 模型 程序 。 


//Replace the existing Program machine 
machine Program() : Main 


{ 
construct model program from CombinationConfig 


2 


5. 浏览 机 器 


(D 从 Spec Explorer 菜单 中 打开 Open Exploration Manager, 选 择 一 个 要 浏览 的 机 器 。 
(2) 单 击 Exploration Manager 工具 栏 中 的 Explorer 按钮 。 

(3) 声明 一 个 接受 状态 条 件 。 

[AcceptingStateCondition] 


static bool Accept() 
{ 


return (s != 0); //only states where s is not zero are accepting 


} 


6. 创建 一 个 测试 用 例 集 


CD 选择 测试 用 例 集 生成 策略 。 

(D Short Test 策略 是 指 每 当 遍 历 到 达 一 个 接受 点 时 生成 一 个 测试 用 例 。 

© Long Test 策略 是 指 在 一 个 测试 用 例 中 包含 尽 可 能 多 的 步骤 (多 个 接受 点 ), 从 而 使 
得 测试 用 例 数 较 少 。 

@ 这 两 个 测试 策略 都 以 测试 覆盖 率 (覆盖 的 步 又 的 百分数 ,每 一 个 步 又 至 少 经 历 一 次 ) 
作为 判定 条 件 。 

(2) 在 Cord 脚本 中 定义 遍历 机 器 ,从 模型 中 提取 测试 用 例 。 

CD 对 于 小 型 模型 ,可 以 直接 遍历 。 

© 对 于 大 型 模型 ,通常 按 场景 遍历 。 

machine TestSuite() : Main 

| construct test cases where Strategy = "ShortTests" 

for ModelWithOneMax 

) 

(3) f£ Exploration Manager 中 选择 遍历 机 器 。 

(4) 单 击 Explorer 按钮 查看 是 否 取得 良好 的 测试 覆盖 率 ( 可 选 ) 。 

CD 有 效 测 试 应 当 以 接受 状态 结束 。 

@ 无 效 测试 (系统 不 允许 的 操作 ) 应 当 以 error 或 non-accepting-end 状态 结束 。 
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(5) 单 击 Generate Test Code 按钮 生成 测试 用 例文 件 。 
CD 生成 的 测试 文件 的 完全 路 径 将 在 Visual Studio 状态 栏 中 显示 。 
© 可 以 使 用 config switch 指定 生成 的 测试 文件 的 路 径 和 文件 名 称 。 


7. 创建 一 个 测试 适配器 adapter( 可 选 ) 


(1) 在 当前 的 解决 方案 中 创建 一 个 保存 适配器 的 类 库 项 目 。 

(2) 在 适配器 项 目 中 定义 被 Cord config 中 的 操作 声明 使 用 的 所 有 类 。 

(3) 为 config 中 的 每 个 call-return(non-event) 操 作 相 应 的 适配器 定义 一 个 公共 方法 ， 
该 方法 与 操作 声明 有 相同 的 名 称 和 参数 类 型 。 

(4) 为 config 中 的 每 个 event 操作 相应 的 适配器 定义 一 个 公共 event 变量 ,该 event 变 
量 与 操作 声明 有 相同 的 名 称 和 参数 类 型 。 

(5) 在 模型 项 目 中 增加 对 适配器 项 目的 引用 。 

(6) 在 Cord 脚本 中 为 适配器 名 称 空间 增加 using 子 句 。 

(7) 连接 适配器 和 实现 。 

QD 在 适配器 方法 体 中 调用 实现 方法 。 

@ 在 实现 中 每 当 接收 到 相应 的 响应 就 调用 适配器 事件 。 

using System; 


namespace Calculator 
{ 
public delegate void ShowHandler(int 2); 
public static class CalculatorAdapter 
{ 
public static int result; 
public static event ShowHandler Show; 
public static void Max(int x, int y) //suppose we want to test the Math class 
{ 
result = Math.Max(x, y); 
Show( result); 


} 


8. 运行 测试 (可 选 ) 


(1) 创建 一 个 测试 项 目 ( 可 选 ) 。 

(2) 在 测试 项 目 中 增加 对 适配器 项 目的 引用 (可 选 ) 。 

(3) 将 生成 的 测试 文件 增加 到 测试 项 目 。 

(4) 用 Visual Studio Test Tools 工具 栏 中 的 按钮 运行 测试 。 
对 现 有 系统 的 测试 步骤 如 下 : 


1. 从 实现 中 导入 操作 


确保 包含 了 Cord 脚本 的 项 目 引 用 了 实现 : 
(1) 如 果 你 知道 实现 的 名 称 空间 ,那么 在 Cord 脚本 中 使 用 using 子 句 增加 名 称 空间 
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(可 选 ) 。 

(2) 在 Cord 脚本 中 声明 config. 

(3) 按照 Spec Explorer 建 模 指南 向 导 ( 或 单 击 Visual Studio 菜单 Spec Explorer Assisted 
Procedures-Import Actions…) 将 操作 的 声明 导入 到 config, 表 示 实 现 中 的 方法 和 事件 。 


using System; 
config Main 


{ 


action static int Math. Max(int x, int y); 


} 


2. 编写 模型 规则 


CD 在 C# 文 件 中 创建 类 和 字段 ,用 于 保存 状态 数据 。 

(2) 按照 Spec Explorer 建 模 指 南 向 导 ( 或 单 击 Visual Studio 菜单 Spec Explorer-Assisted 
Procedures-Declare rule methods…) 在 config 中 为 操作 声明 规则 方法 。 

(3) 编写 方法 体 ,规则 方法 通常 指定 了 : 

QD 在 什么 状态 启用 规则 。 

@ 规则 如 何 更 新 状态 内 容 。 

using Microsoft. Modeling; 


namespace Calculator 


{ 
static class ModelProgram 
{ 
[Rule(Action = "Max(x, y)/result")] 
static int Max( int x, int y) //rule method 
{ 
ints = х>у?х:у; 
return s; 


} 


з. 选择 场景 


(1) 在 Cord 脚本 中 创建 模型 程序 机 。 

(2) 创建 一 个 或 多 个 场景 机 ,用 于 表示 你 想 要 测试 的 行为 集合 (可 选 ) 。 

(3) 模型 程序 和 场景 结合 提取 选择 的 行为 (可 选 ) 。 

4. 组 合 参 数值 (可 选 ) 

CD 增加 一 个 config 集成 了 一 个 config( 这 个 config 使 用 参数 组 合 包含 了 操作 ) 。 
(2) 在 新 增 的 config 中 复制 操作 的 声明 (你 将 为 其 提供 组 合 ) 。 

(3) 为 每 个 声明 增加 where 构造 。 


config CombinationConfig : Main //extended config for combinations 


48 


` 


软件 测试 实战 教程 


{ 
action abstract static void CalculatorAdapter.Max(int x, int y) 
where (. 
Condition.In(x, -1, 0, 1); 
Condition. In(y, 2, 3); 
Combination. Interaction(x); 
Combination. Interaction(y); 
Combination.Isolated(x -- - 1); 
zn 
) 


(4) 从 组 合 config 中 构造 一 个 或 多 个 模型 程序 ,或 替换 现 有 的 模型 程序 。 


//Replace the existing Program machine 
machine Program() : Main 


{ 
construct model program from CombinationConfig 


} 


5. 浏览 机 器 


(1) 从 Spec Explorer 菜单 中 打开 Open Exploration Manager, 选 择 一 个 要 浏览 的 机 器 。 
(2) 单 击 Exploration Manager 工具 栏 中 的 Explorer 按钮 。 

(3) 声明 一 个 接受 状态 条 件 。 

[AcceptingStateCondition] 

static bool Accept() 

{ 


return true; //all states are accepting 


} 


6. 创建 一 个 测试 用 例 集 


CD 选择 测试 用 例 集 生 成 策略 。 
(D Short Test 策略 是 指 每 当 遍 历 到 达 一 个 接受 点 时 生成 一 个 测试 用 例 。 
© Long Test 策略 是 指 在 一 个 测试 用 例 中 包含 尽 可 能 多 的 步骤 (多 个 接受 点 ), 从 而 使 


得 测试 用 例 数 较 少 。 


@ 这 两 个 测试 策略 都 以 测试 覆盖 率 ( 覆 盖 的 步骤 的 百分数 ,每 一 个 步骤 至 少 经 历 一 次 ) 


作为 判定 条 件 。 


(2) 在 Cord 脚本 中 定义 遍历 机 器 ,从 模型 中 提取 测试 用 例 。 

D 对 于 小 型 模型 ,可 以 直接 遍历 。 

© 对 于 大 型 模型 ,通常 按 场 景 遍历 。 

(3) 在 Exploration Manager 中 选择 遍历 机 器 。 

(4) 单 击 Explorer 按钮 查看 是 否 取得 良好 的 测试 覆盖 率 ( 可 选 ) 。 

CD 有 效 测 试 应 当 以 接受 状态 结束 。 

@ 无 效 测试 (系统 不 允许 的 操作 ) 应 当 以 error 或 non-accepting-end 状态 结束 。 
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(5) 单 击 Generate Test Code 按钮 生成 测试 用 例文 件 。 
CD 生成 的 测试 文件 的 完全 路 径 将 在 Visual Studio 状态 栏 中 显示 。 
© 可 以 使 用 config switch 指定 生成 的 测试 文件 的 路 径 和 文件 名 称 。 


7. 运行 测试 (可 选 ) 


(1) 创建 一 个 测试 项 目 (可 选 ) 。 

(2) 在 测试 项 目 中 增加 对 适配器 项 目的 引用 (可 选 ) 。 

(3) 将 生成 的 测试 文件 增加 到 测试 项 目 。 

(4) 用 Visual Studio Test Tools 工具 栏 中 的 按钮 运行 测试 。 
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本 章 主要 内 容 

测试 的 组 织 结构 

测试 计划 和 估算 

测试 过 程 监控 

配置 管理 

风险 和 测试 

事件 管理 

TestLink 操作 演练 

2009 年 ,Z 公司 在 IBM 咨询 顾问 的 帮助 下 成 立 了 一 个 50 人 的 Oracle EBS 项 目 实施 团 
队 , 负 责 Oracle EBS 的 实施 和 二 次 开发 。 实 施 团队 的 成 员 包 括 来 自 IBM 的 ERP 业务 顾 
问 、ERP 技术 顾问 、Z 公司 的 IT 人 员 和 关键 用 户 。 为 了 对 二 次 开发 过 程 中 的 需求 文档 、 设 
计 文档 , 源 代码 进行 有 效 管理 ,IBM 咨询 项 目 经 理 建议 使 用 VSSCVisual Source Safe) 作为 
管理 工具 。VSS fE Z 公司 的 Oracle EBS 项 目 实施 中 发 挥 了 重要 作用 。 从 此 , 老 沙 对 软件 开 
发 过 程 既 涉 及 技术 问题 ,又 涉及 管理 问题 有 了 深刻 认识 。 软 件 测试 是 软件 开发 的 一 个 重要 
方面 ,同样 应 该 既 重 视 技术 问题 ,又 重视 管理 问题 。 

本 章 首先 介绍 软件 测试 管理 的 基本 知识 ,然后 介绍 软件 测试 管理 工具 TestLink 的 使 用 
方法 。 


€i 什么 是 软件 测试 管理 


软件 测试 过 程 既 涉及 技术 问题 又 涉及 管理 问题 ,软件 测试 管理 是 软件 测试 的 重要 内 容 。 
软件 测试 是 在 有 限 的 时 间 内 ,软件 测试 团队 验证 软件 产品 符合 软件 规格 说 明 要 求 ,发 现 可 能 
存在 的 缺陷 。 软 件 测试 需要 借助 软件 测试 工具 的 支持 ,软件 测试 是 在 有 限 的 资源 条 件 下 进 
行 的 。 如 何 利 用 有 限 的 测试 资源 .在 有 限 的 时 间 内 完成 有 效 的 软件 测试 ,是 软件 测试 管理 的 
任务 。 软 件 测试 管理 的 主要 内 容 包 括 如 何 组 织 测试 人 员 (测试 组 织 )、 如 何 充分 利用 有 限 的 
时 间 (测试 计划 )、 如 何 对 测试 过 程 进行 监控 等 。 软 件 测试 管理 是 对 软件 测试 全 过 程 的 管 
理 , 软 件 测试 过 程 主要 包括 测试 准备 ,测试 计 划 和 控制 .测试 设计 、 测 试 执行 和 测试 结果 
分 析 。 
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2.1.1 测试 组 织 
在 测试 准备 阶段 ,一 般 应 成 立 独立 的 测试 团队 ,团队 成 员 分 工 合作 ,共同 完成 测试 任务 。 


测试 团队 需要 参加 有 关 项 目 计划 、 分 析 和 设计 会 议 ,获取 必要 的 需求 分 析 、 系 统 设计 文档 , 进 
行 相关 产品 /技术 知识 的 培训 。 


1. 测试 组 织 和 测试 独立 性 


通过 独立 的 测试 员 进行 测试 和 评审 ,发 现 缺陷 的 效率 会 提高 。 可 能 的 独立 测试 如 下 : 
不 设 独立 的 测试 员 , 由 开发 人 员 测 试 自己 的 代码 。 
开发 团队 内 独立 的 测试 员 。 
组 织 内 独立 的 测试 小 组 或 团队 ,向 项 目 经 理 或 执行 经 理 汇 报 。 
来 自 业 务 组 织 、 用 户 团体 内 的 独立 测试 员 。 
针对 特定 测试 类 型 的 独立 测试 专家 ,例如 ,可 用 性 测试 员 、 安 全 性 测试 员 或 认证 测试 
员 ( 他 们 根据 标准 和 法 律 法 规 对 软件 产品 进行 认证 )。 
外 包 或 组 织 外 的 独立 测试 员 。 

对 于 庞大 、 复 杂 或 安全 关键 的 项 目 ,通常 最 好 有 多 级 别 的 测试 ,并 让 独立 的 测试 员 负 责 
某 些 级 别 或 所 有 的 测试 。 开 发 人 员 也 可 以 参与 测试 ,尤其 是 一 些 低 级 别 的 测试 ,但 是 开发 人 
员 往 往 缺 少 客观 性 ,会 限制 测试 的 有 效 性 。 独 立 测试 员 有 权 要 求 和 定义 测试 过 程 及 规则 ,但 
是 测试 员 应 该 只 在 存在 明确 管理 授权 的 情况 下 才能 充当 这 种 过 程 相关 的 角色 。 

独立 测试 的 优点 : 

* 独立 的 测试 员 是 公正 的 ,可 以 发 现 一 些 其 他 不 同 的 缺陷 。 

。 一 个 独立 的 测试 员 可 以 验证 在 系统 规格 说 明和 实现 阶段 所 做 的 一 些 假设 。 

独立 测试 的 缺点 : 

。 与 开发 小 组 脱离 (如 果 完全 独立 ) 。 

* 开发 人 员 可 能 丧失 对 软件 质量 的 责任 感 。 

* 独立 的 测试 员 可 能 被 视 为 瓶颈 或 者 成 为 延 时 发 布 而 被 责备 的 对 象 。 

测试 任务 可 以 由 专门 的 测试 员 完成 ,也 可 以 由 其 他 的 角色 来 完成 ,比如 项 目 经 理 、 质 量 
经 理 、 开 发 人 员 、 业 务 和 领域 内 的 专家 、 基 础 架构 或 IT 运行 人 员 。 


2. 测试 组 长 和 测试 员 的 任务 


在 ISTQB 课程 大 岗 中 ,涉及 两 个 测试 角色 : 测试 组 长 和 测试 员 。 这 两 个 角色 执行 的 活 
动 和 任务 是 由 项 目 和 产品 的 背景 人 员 的 角色 和 组 织 结构 来 决定 的 。 

有 时 候 , 测 试 组 长 也 称 为 测试 经 理 或 测试 协调 人 。 测 试 组 长 的 角色 也 可 以 由 项 目 经 理 、 
开发 经 理 \ 质 量 保证 经 理 或 测试 组 的 经 理 来 担任 。 在 较 大 的 项 目 中 ,常常 会 有 两 个 职位 : 测 
试 组 长 和 测试 经 理 。 测 试 组 长 通常 计划 、 监 督 和 控制 测试 活动 和 任务 。 

测试 组 长 的 主要 任务 包括 : 

* 与 项 目 经 理 以 及 其 他 人 共同 协调 测试 策略 和 测试 计划 。 

。 制定 或 评审 项 目的 测试 策略 和 组 织 的 测试 方针 。 

。 将 测试 的 安排 合并 到 其 他 项 目 活动 中 ,比如 集成 计划 。 
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制定 测试 计划 (要 考虑 背景 ,了 解 测试 目标 和 风险 )。 包 括 选择 测试 方法 ,估算 测试 
的 时 间 、 工 作 量 和 成 本 ,获取 资源 ,定义 测试 级 别 、 测 试 周期 并 规划 事件 管理 。 
启动 测试 说 明 测试 准备 、 测 试 实 施 和 测试 执行 ,监督 测试 结果 并 检查 出 口 准则 。 
根据 测试 结果 和 测试 过 程 ( 有 时 记录 在 状态 报告 中 ) 调 整 测 试 计划 ,并 采取 任何 必要 
措施 对 存在 的 问题 进行 补救 。 
对 测试 件 进行 配置 管理 ,保证 测试 件 的 可 追溯 性 。 
引入 合适 的 度量 项 以 测量 测试 进度 ,评估 测试 和 产品 的 质量 。 
决定 什么 应 该 自动 化 、 自 动 化 的 程度 以 及 如 何 实 现 。 
选择 测试 工具 支持 测试 ,并 为 测试 员 组 织 测试 工具 使 用 的 培训 。 
决定 关于 测试 环境 实施 的 问题 。 
根据 在 测试 过 程 中 收集 的 信息 编写 测试 总 结 报告 。 
测试 员 的 主要 任务 包括 : 
评审 和 参与 测试 计划 的 制定 。 
分 析 、 评 审 和 评估 用 户 需 求 .规格 说 明 书 及 模型 的 可 测试 性 。 
创建 测试 说 明 。 
建立 测试 环境 (通常 需要 系统 管理 员 ,网 络 管理 员 协 同 完成 ) 。 
准备 和 获取 测试 数据 。 
进行 所 有 级 别 的 测试 ,执行 并 记录 测试 日 志 , 评 估 测 试 结果 ,记录 和 预期 结果 之 间 的 
根据 需要 使 用 测试 管理 工具 和 测试 监控 工具 。 
实施 自动 化 测试 (可 能 需要 开发 人 员 或 测试 自动 化 专家 的 支持 ) 。 
在 可 行 的 情况 下 ,测量 组 件 和 系统 的 性 能 。 
对 他 人 的 测试 进行 评审 。 

从 事 测试 分 析 ,测试 设计 、 特 定 测试 类 型 或 自动 化 测试 方面 的 工作 人 员 都 可 以 是 这 些 角 
色 的 专家 。 根 据 测 试 级 别 及 与 产品 和 项 目 相 关 的 风险 ,可 以 由 不 同 的 人 员 担 任 测试 员 的 角 
色 , 以 保持 一 定 程度 的 独立 性 。 在 组 件 和 集成 测试 的 级 别 , 典 型 的 测试 员 可 能 是 开发 人 员 ; 
进行 验收 测试 的 典型 测试 员 可 能 是 业务 方面 的 专家 和 用 户 ; 进行 运行 验收 测试 ( 即 用 户 验 
收 测试 ,User Acceptance Test. fij f UAT) 的 典型 测试 员 可 能 是 运行 操作 者 即 用 户 。 


2.1.2 测试 计划 和 估算 


测试 计划 阶段 的 主要 工作 是 确定 测试 内 容 或 质量 特性 ,确定 测试 的 充分 性 要 求 ,制定 测 
试 策略 和 方法 ,对 可 能 出 现 的 问题 和 风险 进行 分 析 和 估计 ,制定 测试 资源 计划 和 测试 进度 
计划 。 


1. 什么 是 测试 计划 

(АМЅІЛЕЕЕ 软件 测试 文档 标准 829 一 1983) 将 测试 计划 定义 为 :“ 一 个 描述 了 预定 的 
测试 活动 的 范围 途径、 资源 及 进度 安排 的 文档 。 它 确认 了 测试 项 、 被 测 特征 、 测 试 任务 、 人 
员 安 排 ,以 及 任何 偶发 事件 的 风险 。” 

本 节 将 描述 在 开发 和 实施 项 目 以 及 维护 过 程 中 .制定 测试 计划 的 目的 。 测 试 计划 可 以 
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在 项 目 计划 或 主 测试 计划 中 文档 化 ,也 可 以 在 不 同 的 测试 级 别 ( 如 系统 测试 和 验收 测试 ?的 
测试 计划 中 文档 化 。 

测试 计划 受到 很 多 因素 的 影响 ,如 组 织 的 测试 方针 ,测试 范围 ,测试 目标 、 风 险 、 约 束 、 关 
键 程度 、 可 测试 性 和 资源 的 可 用 性 等 。 随 着 项 目 和 测试 计划 的 不 断 推进 ,将 有 更 多 的 信息 和 
具体 细节 包含 在 计划 中 。 

测试 计划 是 个 持续 的 活动 ,需要 在 整个 生命 周期 过 程 和 活动 中 进行 。 从 测试 中 得 到 的 
反馈 信息 可 以 识别 变化 的 风险 ,从 而 对 计划 做 出 相应 的 调整 。 

2. 测试 计划 活动 


对 整个 系统 或 部 分 系统 可 能 的 测试 计划 活动 包括 : 

确定 测试 的 范围 和 风险 ,明确 测试 的 目标 。 

。 决 定 总体 测 试 方法 ,包括 测试 级 别 、 入 口 和 出 口 准则 的 界定 。 

。 把 测试 活动 整合 和 协调 到 整个 软件 生命 周期 活动 中 去 (采购 、 供 应 、 开 发 和 运 维 )。 
决定 测试 什么 (What)? 测试 由 什么 角色 来 执行 (Who)? 如 何 进行 测试 (How)? 如 
何 评估 测试 结果 (How)? 

。 为 测试 分 析 和 设计 活动 安排 时 间 进 度 。 

。 为 测试 实现 、 执 行 和 评估 安排 时 间 进 度 。 

。 为 已 定义 的 不 同 测试 活动 分 配 资源 。 

。 定 义 测试 文档 的 数量 ,详细 程度 、 结 构 和 模板 。 

为 监控 测试 准备 和 执行 .缺陷 解决 和 风险 问题 选择 度量 项 。 

确定 测试 规程 的 详细 程度 ,以 提供 足够 的 信息 支持 可 复 用 的 测试 准备 和 执行 。 


3. 入 口 准则 


. 


入 口 准则 定义 了 什么 时 候 可 以 开始 测试 ,如 某 个 测试 级 别 的 开始 ,或 什么 时 候 一 组 测试 
准备 就 绪 可 以 执行 。 

入 口 准则 主要 包含 : 

+ 测试 环境 已 经 准备 就 绪 并 可 用 。 

。 测试 工具 在 测试 环境 中 已 经 准备 就 绪 。 

* 可 测 的 代码 可 用 。 


4. 出 口 准则 


测试 出 口 准则 (exit criteria) 的 目的 是 : 定义 什么 时 候 可 以 停止 测试 ,比如 某 个 测试 级 
别 的 结束 ,或 者 当 测 试 达到 了 规定 的 目标 。 

出 口 准则 主要 包含 : 

。 完整 性 测量 ,比如 代码 、 功 能 或 风险 的 覆盖 率 。 

* 对 缺陷 密度 或 可 靠 性 度量 的 估算 。 

。 成 本 。 
遗留 风险 ,例如 没有 被 修改 的 缺陷 或 在 某 些 部 分 测试 覆盖 不 足 。 
进度 表 , 例 如 基于 交付 到 市 场 的 时 间 。 
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5. 


测试 估算 


有 两 种 估算 测试 工作 量 的 方法 : 


基于 度量 的 方法 一 一 根据 以 前 或 相似 项 目的 度量 值 来 进行 测试 工作 量 的 估算 ,或 者 
根据 典型 的 数据 来 进行 估算 。 
基于 专家 的 方法 一 一 由 任务 的 责任 人 或 专家 来 进行 测试 任务 工作 量 的 估算 。 


一 旦 估算 了 测试 工作 量 , 就 可 以 识别 资源 和 制定 时 间 进 度 表 。 
测试 的 工作 量 可 能 取决 于 多 种 因素 ,包括 : 


6. 


产品 的 特点 一 一 规格 说 明和 用 于 测试 模型 的 其 他 信息 ( 即 测试 依据 ) 的 质量 ,产品 的 
规模 ,问题 域 的 复杂 度 , 可 靠 性 、 安 全 性 的 需求 和 文档 的 需求 。 

开发 过 程 的 特点 一 一 组 织 的 稳定 性 ,使 用 的 工具 、 测 试 过 程 . 参 与 者 的 技能 水 平和 时 
测试 的 输出 一 一 缺陷 的 数量 和 需要 返工 的 工作 量 。 


测试 策略 、 测 试 方法 


在 特定 项 目 中 ,测试 方法 是 测试 策略 的 具体 实现 。 测 试 方法 是 在 测试 计划 和 设计 阶段 
中 被 定义 并 逐步 细 化 的 。 它 通常 取决 于 (测试 ) 项 目 目标 和 风险 评估 。 它 是 规划 测试 过 程 、 
选择 测试 设计 技术 和 应 用 的 测试 类 型 以 及 定义 人 口 和 出 口 准则 的 起 点 。 

测试 方法 的 选择 取决 于 实际 情况 ,应 当 考 虑 风险 .危害 和 安全 、 可 用 资源 和 人 员 技能 、 技 
术 、 系 统 的 类 型 (比如 客户 定制 与 商业 现货 软件 的 比较 ) 、 测 试 对 象 和 相关 法 规 。 

典型 的 测试 方法 包括 : 


分 析 的 方法 ,比如 基于 风险 的 测试 ,直接 针对 风险 最 高 的 部 分 进行 测试 。 

基于 模型 的 方法 ,比如 随机 测试 利用 失效 率 ( 如 可 靠 性 增长 模型 ) 或 使 用 率 (如 运行 
概况 ) 的 统计 信息 。 

系统 的 方法 ,比如 基于 失效 的 方法 (包括 错误 推测 和 故障 攻击 )、 基 于 检查 表 的 方法 
和 基于 质量 特征 的 方法 。 

基于 与 过 程 或 符合 标准 的 方法 ,比如 在 行业 标准 中 规定 的 方法 或 各 类 敏捷 方法 。 
动态 和 启发 式 的 方法 ,类 似 于 探索 式 软 件 测试 ,测试 在 很 大 程度 上 依赖 于 事件 而 非 
提前 计划 ,而且 执 行 和 评估 几乎 是 同时 进行 的 。 

咨询 式 的 方法 ,比如 测试 覆盖 率 主要 是 根据 测试 小 组 以 外 的 业务 领域 和 /或 技术 领 
域 专 家 的 建议 和 指导 来 推动 的 。 

可 重用 的 方法 ,比如 重用 已 有 的 测试 材料 ,广泛 的 功能 回归 测试 的 自动 化 ,标准 测试 
套件 等 。 


可 以 结合 使 用 不 同 的 测试 方法 ,比如 基于 风险 的 动态 方法 。 


2. 


1.3 测试 过 程 监控 


计划 与 控制 是 项 目 管理 的 两 个 重要 方面 ,软件 测试 计划 与 测试 过 程 监 控 也 不 例外 。 软 
件 测试 计划 是 有 效 测试 的 前 提 , 但 是 ,只 有 好 的 计划 ,没有 对 测试 过 程 进行 有 效 监控 ,往往 会 
导致 软件 测试 任务 的 失败 。 因 此 ,还 必须 对 测试 过 程 进行 有 效 监 控 , 并 对 测试 计划 进行 适当 
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修改 。 计 划 和 监控 的 目的 都 是 确保 完成 测试 任务 。 
1. 什么 是 测试 过 程 监控 


测试 监控 的 目的 是 提供 关于 测试 活动 的 反馈 信息 ,使 测试 活动 保持 可 视 性 。 监 控 的 信 
息 可 以 通过 手工 或 自动 的 方式 进行 收集 ,同时 可 以 用 来 衡量 出 口 准则 ,比如 测试 覆盖 率 , 也 
可 以 用 度量 数据 对 照 原 计 划 的 时 间 进 度 和 预算 来 评估 测试 的 进度 。 常 用 的 测试 度量 项 有 : 
。 测试 用 例 准 备 工 作 完 成 的 百分比 (或 按 计 划 已 编写 的 测试 用 例 的 百分比 ) 。 
+ 测试 环境 准备 工作 完成 的 百分比 。 
测试 用 例 执行 情况 (例如 ,执行 /没有 执行 的 测试 用 例 数 、. 通 过 /失败 的 测试 用 例 数 ) 。 
缺陷 信息 (例如 ,缺陷 密度 、 发 现 并 修改 的 缺陷 、 失 效率 、 重 新 测试 的 结果 )。 
。 需 求 、 风 险 或 代码 的 测试 覆盖 
。 测 试 员 对 产品 的 主观 信心 。 
测试 里 程 碑 的 日 期 。 
测试 成 本 ,包括 寻找 下 一 个 缺陷 或 执行 下 一 轮 测 试 所 需 成 本 与 收益 的 比较 。 


2. 测试 报告 


测试 报告 是 对 测试 工作 和 活动 等 相关 信息 的 总 结 ,主要 包括 : 

。 在 测试 周期 内 发 生 了 什么 ? 比如 达到 测试 出 口 准则 的 日 期 。 

* 通过 分 析 相 关 信 息 和 度量 可 以 对 下 一 步 的 活动 提供 建议 和 做 出 决策 ,比如 对 遗留 缺 
陷 的 评估 、 继 续 进 行 测试 的 经 济 效益 .未 解决 的 风险 以 及 被 测试 软件 的 置信 度 等 。 
测试 总 结 报告 的 大 纲 可 以 参考 软件 测试 文档 标准 (IEEE Std 829-1998) 。 

需要 在 测试 级 别 的 过 程 中 和 完成 时 收集 度量 信息 ,以 评估 该 测试 级 别 的 测试 目标 实 
现 的 充分 性 。 

。 采用 的 测试 方法 的 适当 性 。 

针对 测试 目标 的 测试 的 有 效 性 。 

3. 测试 控制 


测试 控制 描述 了 根据 收集 和 报告 的 测试 信息 和 度量 而 采取 的 指导 或 纠正 措施 。 措 施 可 
能 包括 任何 测试 活动 ,也 可 能 影响 其 他 软件 生命 周期 中 的 活动 或 任务 。 

测试 控制 措施 的 例子 : 

。 基 于 测试 监控 信息 来 做 决策 。 

* 如果 一 个 已 识别 的 风险 发 生 (如 软件 交付 延期 ) ,重新 确定 测试 优先 级 。 
根据 测试 环境 可 用 性 ,改变 测试 的 时 间 进 度 表 。 
设 定 入口 准 则 : 规定 修改 后 的 缺陷 必须 经 过 开发 人 员 再 测试 (确认 测试 ) 后 才能 将 
它们 集成 到 产品 中 去 。 


2.1.4 配置 管理 


配置 管理 的 目的 是 在 整个 项 目 和 产品 的 生命 周期 内 ,建立 和 维护 软件 或 系统 产品 (组 
件数 据 和 文档 ) 的 完整 性 。 
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对 测试 而 言 , 采 用 配置 管理 可 以 确保 : 
° 测试 件 的 所 有 相关 项 都 已 经 被 识别 ,版 本 受 控 , 相 互 之 间 有 关联 以 及 与 开发 项 (测试 
对 象 ) 之 间 有 关联 的 变更 可 跟踪 ,从 而 保证 可 追溯 性 。 
。 在 测试 文档 中 ,所 有 被 标识 的 文档 和 软件 项 能 被 清晰 明确 地 引用 。 
对 于 测试 员 来 说 ,配置 管理 可 以 帮助 他 们 唯一 地 标识 (并 且 复 制 ) 测 试 项 ,测试 文档 、 测 
试用 例 和 测试 用 具 。 
在 测试 计划 阶段 ,应 该 选择 配置 管理 的 规程 和 基础 设施 (工具 ), 将 其 文档 化 并 予以 


2.1.5 风险 和 测试 


风险 可 以 定义 为 事件 危险、 威胁 或 情况 等 发 生 的 可 能 性 以 及 由 此 产生 不 可 预料 的 后 
果 , 即 一 个 潜在 的 问题 。 风 险 级 别 取 决 于 发 生 不 确定 事件 的 可 能 性 和 产生 的 影响 (事件 引发 
的 不 良 后 果 )。 风 险 可 分 为 两 大 类 : 项 目 风 险 和 产品 风险 。 


1. 项 目 风险 


项 目 风险 是 围绕 项 目 按 目 标 交 付 的 能 力 的 一 系列 风险 ,比如 : 

1) 组 织 因 素 

。 技能 .培训 和 人 员 的 不 足 。 

* 个 人 问题 。 

。 政策 因素 ,比如 : 

D 与 测试 员 进行 需求 和 测试 结果 沟通 方面 存在 的 问题 。 

@ 测试 和 评审 中 发 现 的 信息 未 能 得 到 进一步 跟踪 (比如 未 改进 开发 和 测试 实践 ) 。 

* 对 测试 的 态度 或 预期 不 合理 (比如 没有 意识 到 在 测试 中 发 现 缺 陷 的 价值 ) 。 

2) 技术 因素 

* 不 能 定义 正确 的 需求 。 

* 给 定 现 有 限制 的 情况 下 , 没 能 满足 需求 的 程度 。 

。 测试 环境 没有 及 时 准备 好 。 

。 数据 转换 .迁移 计 划 ,开发 和 测试 数据 转换 /迁移 工具 造成 的 延迟 。 

° 低 质量 的 设计 、 编 码 配置 数据 ,测试 数据 和 测试 。 

3) 供应 商 因素 

。 第 三 方 存在 的 问题 。 

。 合同 方面 的 问题 。 

在 分 析 、 管 理 和 缓解 这 些 风险 的 时 候 , 测 试 经 理 需 要 遵循 完善 的 项 目 管理 原则 。 软 件 测 
试 文档 标准 (IEEE Std 829-1998) 中 指出 ,测试 计划 需要 陈述 风险 和 应 急 措 施 。 


2. 产品 风险 
在 软件 或 系统 中 的 潜在 失效 部 分 (即将 来 可 能 发 生 不 利 事件 或 危险 ) 称 为 产品 风险 , 因 


为 它们 对 产品 质量 而 言 是 一 个 风险 ,可 能 的 产品 风险 如 下 : 
。 故 障 频 发 的 软件 交付 使 用 。 
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* 软件 /硬件 对 个 人 或 公司 造成 潜在 损害 的 可 能 性 。 

+ 劣质 的 软件 特性 (比如 功能 性 、 可 靠 性 ` 易 用 性 和 人 性 能 等 ) 。 

。 低劣 的 数据 完整 性 和 质量 (例如 ,数据 迁移 问题 .数据 转换 问题 ,数据 传输 问题 .违反 

数据 标准 问题 ) 。 

。 软 件 没有 实现 既定 的 功能 。 

风险 通常 可 以 用 来 决定 从 什么 地 方 开始 测试 ,什么 地 方 需要 更 多 的 测试 。 测 试 可 以 用 
来 降低 风险 或 可 以 减少 负面 事件 的 影响 。 

产品 风险 对 于 项 目的 成 功 来 讲 是 一 种 特殊 类 型 的 风险 。 作 为 一 种 风险 控制 活动 ,测试 
通过 评估 修正 严重 缺陷 的 能 力 和 应 急 计划 的 有 效 性 来 提供 关于 遗留 风险 的 反馈 信息 。 

在 项 目 初期 阶段 ,使 用 基于 风险 的 方法 进行 测试 ,有 利于 降低 产品 风险 的 级 别 。 它 包括 
对 产品 风险 的 识别 ,并 且 将 这 些 风险 应 用 到 指导 测试 计划 和 控制 .测试 说 明 、 测 试 准 备 和 执 
行 中 。 在 基于 风险 的 测试 方法 中 ,识别 出 的 风险 可 以 用 于 : 
决定 所 采用 的 测试 技术 。 
决定 要 进行 测试 的 范围 。 
确定 测试 的 优先 级 ,尝试 尽早 地 发 现 严重 缺陷 。 
决定 是 否 可 以 通过 一 些 非 测试 的 活动 来 降低 风险 (比如 对 缺乏 经 验 的 设计 者 进行 相 
应 的 培训 ) 。 
基于 风险 的 测试 需要 借助 于 项 目 利益 相关 者 的 集体 知识 和 智慧 ,从 而 识别 风险 以 及 
为 了 应 对 这 些 风险 需要 采用 的 测试 级 别 。 

为 了 确保 产品 失效 机 会 最 小 化 ,风险 管理 活动 提供 了 一 些 系统 化 的 方法 : 

。 评 估 ( 并 定期 重新 评估 ) 可 能 出 现 的 错误 (风险 )。 

。 决 定 哪些 风险 是 重要 的 需要 处 理 的 。 

”处 理 风险 的 具体 措施 。 

男 外 ,测试 可 以 帮助 识别 新 的 风险 ,有 助 于 确定 应 该 降低 哪些 风险 ,以 及 降低 风险 的 不 
确定 性 。 


2.1.6 事件 管理 


测试 的 目的 之 一 是 发 现 缺 陷 , 所 以 实际 结果 和 预期 结果 之 间 的 差异 需要 作为 一 个 事件 
被 记录 。 事 件 必须 进行 调查 ,并 且 有 可 能 最 终 被 证 明 是 一 个 缺陷 。 应 当 定 义 合理 的 措施 以 
便 对 事件 和 缺陷 进行 有 效 处 理 。 事 件 和 缺陷 应 该 从 发 现 和 分 类 就 开始 跟踪 ,直到 改正 并 被 
确认 已 经 解决 。 为 了 完成 所 有 事件 的 管理 ,应 该 在 组 织 内 建立 一 套 完 整 的 事件 管理 过 程 和 
分 类 规则 。 

在 软件 产品 的 开发 .评审 和 测试 以 及 软件 使 用 的 过 程 中 都 会 产生 事件 。 它 们 可 能 是 在 
代码 内 或 在 使 用 的 系统 内 或 以 任意 方式 在 文档 (包括 需求 文档 、 开 发 文档 、 测 试 文档 和 用 户 
文档 ,如 “帮助 ”或 安装 手册 等 ) 内 产生 。 

事件 报告 的 主要 目标 如 下 : 

。 为 开发 人 员 和 其 他 人 员 提 供 问 题 反馈 ,在 需要 的 时 候 可 以 进行 识别 隔离 和 纠正 。 

。 为 测试 组 长 提供 一 种 有 效 跟 踪 被 测 系统 质量 和 测试 进度 的 方法 。 

。 为 测试 过 程 改 进 提供 资料 。 
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事件 报告 的 具体 内 容 主 要 包括 : 

。 提交 事件 的 时 间 ,提交 的 组 织 和 作者 。 

° 预期 和 实际 的 结果 。 

识别 测试 项 (配置 项 ) 和 环境 。 

发 现 事件 时 软件 或 系统 所 处 的 生命 周期 阶段 。 

为 了 能 确保 重 现 和 解决 事件 需要 描述 事件 (包括 日 志 、 数 据 库 备份 或 截屏 ) 。 

对 利益 相关 者 的 影响 范围 和 程度 。 

对 系统 影响 的 严重 程度 。 

修复 的 紧迫 性 /优先 级 。 

事件 状态 (例如 ,打开 的 、 延 期 的 ,重复 的 、 待 修复 的 ,修复 后 待 重 测 的 或 关闭 的 等 )。 
结论 、 建 议和 批准 。 

全 局 的 影响 ,比如 事件 引起 的 变更 可 能 会 对 系统 的 其 他 部 分 产生 影响 。 

变更 历史 记录 ,比如 针对 事件 的 隔离 ,修改 和 已 修改 的 确认 ,项 目 组 成 员 所 采取 的 行 
动 顺 序 。 

参考 ,包括 发 现 问题 所 用 的 测试 用 例 规格 说 明 的 标识 号 。 

事件 报告 的 大 纲 也 可 以 参考 软件 测试 文档 标准 (IEEE Std 829-1998) 。 


2.1.7 软件 测试 管理 工具 


“ 工 欲 善 其 事 , 必 先 利 其 器 。" 借 助 好 的 软件 测试 管理 工具 可 以 提高 软件 测试 管理 的 效率 
和 质量 。 通 过 使 用 测试 管理 工具 ,测试 人 员 和 开发 人 员 可 以 更 方便 地 记录 和 监控 测试 活动 、 
测试 结果 ,记录 测试 活动 中 发 现 的 缺陷 ,提出 改进 措施 ; 通过 使 用 测试 管理 工具 ,测试 用 例 
可 以 被 多 个 测试 活动 或 测试 阶段 复 用 ,可 以 输出 测试 分 析 报 告 和 统计 报表 ,对 测试 进度 和 测 
试 结果 进行 更 直观 的 管理 。 

目前 市 场 上 的 软件 测试 管理 工具 有 很 多 , 既 有 一 些 著名 的 商业 软件 ,也 有 一 些 开 源 软 
件 。 例 如 ,HP 公司 的 Quality Center, IBM 公司 的 Rational Quality Manager, Microsoft Z 
司 的 Test Manager; 开源 的 有 TestLink.QATraq 等 。 


1. TestLink 


TestLink 是 一 个 开源 的 软件 测试 管理 工具 。 通 过 使 用 TestLink 提供 的 功能 ,可 以 将 
测试 过 程 从 测试 需求 ,测试 设计 到 测试 执行 完整 地 管理 起 来 。 同 时 , 它 还 提供 了 多 种 测试 结 
果 的 统计 和 分 析 ,使 我 们 能 够 简单 地 开始 测试 工作 和 分 析 测 试 结 果 。TestLink 的 主要 功能 
如 下 : 

。 测试 需求 管理 。 

。 测试 用 例 管理 。 
测试 用 例 对 测试 需求 的 覆盖 管理 。 
测试 计划 的 制定 。 
测试 用 例 的 执行 。 

大 量 测试 数据 的 度量 和 统计 功能 。 
TestLink 的 主要 功能 可 以 用 用 例 图 表示 ,如 图 2. 1 所 示 。 
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图 2.1 TestLink 用 例 图 


TestLink 用 户 分 为 如 下 几 种 : 

Admin( 系 统管 理 员 ) 一 一 所 有 权限 ,包括 用 户 管理 项 目 管理 等 特权 。 

Leader( 测 试 组 长 ) 一 一 对 测试 需求 ,测试 计划 、 测 试用 例 的 查看 、 创 建 、 指 派 、 执 行 。 
* Senior tester( 测 试 分 析 员 ) 一 一 查看 ,执行 测试 计划 ,查看 .创建 ,执行 测试 用 例 。 

* Tester( 测 试 执行 员 ) 一 一 对 测试 用 例 的 查看 、 创 建 、 执 行 。 

* Test designer( 测 试 设计 员 /测试 分 析 员 ) 一 一 查看 测试 计划 ,查看 、 创 建 测试 用 例 。 
* Guest( 游 客 ) 一 一 查看 测试 计划 测试 用 例 。 

TestLink 测试 管理 流程 如 图 2. 2 所 示 。 


初始 设置 测试 需求 管理 调试 用 例 管理 测试 计划 管理 测试 执行 、 
RHMP pi ong 他 时 测试 用 全 全 Jm) SHEMALE ma) Bug 报 告 mm 测试 结果 分 析 
创建 项 目 创建 测试 需求 创建 测试 用 例 指派 执行 人 员 ШШШ 

建立 测试 用 例 与 测 报告 缺陷 

AMR REAR 


图 2.2 TestLink 测试 管理 流程 


admin 用 户 功能 菜单 如 图 2. 3 所 示 。 
详 见 官网 : http://www. testlink. org, 


2. Quality Center 


Quality Center 简称 QC. R: HP 公司 的 一 个 测试 管理 工具 。QC 的 前 身 是 Mercury 
Iteractive( 美 科 利 ) 公 司 的 Test Director (简称 为 TD) ,后 被 HP 公司 收购 ,正式 命名 为 HP 
Quality Center。 现 在 ,QC 被 重 命 名 为 HP ALM.ALM 是 Application Lifecycle Management( 应 
用 生命 周期 管理 ) 的 简称 。 

HP ALM/QC 有 如 下 优点 : 

+ 通俗 易 懂 ,使 用 方便 。 

。 提供 与 其 他 工具 的 集成 ,例如 ,用 于 自动 化 测试 的 HP UFT 和 用 于 性 能 测试 的 HP 


Load Runner。 


XY 


TestLink 1.9.16 (Moka pot) 
(seien |] 


图 2.3 admin 用 户 功 能 菜单 


。 项 目 状态 对 项 目的 所 有 利益 相关 者 的 可 见 性 。 

。 减少 在 各 个 阶段 管理 项 目的 若干 工件 相关 的 风险 。 

。 降低 成 本 和 时 间 。 

。 使 用 的 灵活 性 。 

HP ALM 的 主要 功能 如 下 : 

。 发 布 管理 一 一 实现 测试 用 例 与 发 布 之 间 的 可 追溯 性 。 

* 需求 管理 一 一 确保 测试 用 例 满足 所 有 指定 的 要 求 。 

。 测 试用 例 管理 一 一 维护 对 测试 用 例 进行 更 改 的 版 本 历史 ,并 作为 应 用 程序 的 所 有 测 
试用 例 的 中 央 存 储 库 。 

测试 执行 管理 一 一 跟踪 测试 用 例 运 行 的 多 个 实例 ,并 确保 测试 工作 的 可 信和 性 。 

缺陷 管理 一 一 确保 发 现 的 重大 缺陷 对 项 目的 所 有 主要 利益 相关 者 都 是 可 见 的 ,并 确 
保 缺 陷 遵 循 特 定 的 生命 周期 直到 关闭 。 

。 报表 管理 一 一 能 够 生成 报告 和 图 表 。 

表 2.1 列 出 了 QC 的 版 本 历史 。 


表 2.1 QC 的 版 本 历史 


F 号 名 Ж 版 Ж 
1 Test Director v1.52—v8. 0 
2 Quality Center v8. 0~v10. 0 
3 Application Lifecycle Management v11. 0~v11. 5x 
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详 见 官网 : https://software. microfocus. com/zh-cn/products/quality-center-quality- 


management/overview. 
3. IBM Rational Quality Manager 


IBM Rational Quality Manager 是 一 种 基于 Web 的 协作 式 工具 ,可 在 软件 开发 生命 周 
期 中 提供 综合 性 测试 规划 测试 构造 和 测试 工件 管理 功能 。 

Rational Quality Manager 供 各 种 大 小 的 测试 团队 使 用 ,并 支持 多 种 用 户 角 色 , 如 测试 
经 理 , 测 试 架 构 设 计 师 ,测试 负责 人 、 测 试 员 和 实验 室 管理 员 等 。Rational Quality Manager 
也 支持 测试 组 织 外 的 角色 。 

1) 综合 性 测试 计划 

在 Rational Quality Manager 中 定义 的 测试 计划 可 在 项 目 生命 周期 的 各 个 阶段 推动 分 
布 在 各 地 的 团队 的 活动 。 测 试 计划 定义 测试 工作 的 目标 和 作用 域 , 它 包 含 的 条 件 可 帮助 团 
队 确 定 以 下 问题 的 答案 :“ 是 否 可 发 布 ?” 

可 对 测试 计划 进行 配置 ,以 满足 组 织 的 需要 。 可 以 使 用 测试 计划 来 执行 以 下 任何 一 项 
任务 


定义 业务 和 测试 目标 。 

为 测试 计划 和 个 别 测试 用 例 建立 复审 与 核准 流程 。 

管理 项 目 需求 和 测试 用 例 并 建立 它们 之 间 的 相互 依赖 性 。 
评估 测试 工作 量 。 

定义 每 个 测试 迭代 的 调度 并 跟踪 其 他 重要 测试 活动 的 日 期 。 
列 出 需要 测试 的 各 种 环境 并 生成 测试 配置 。 

在 特定 的 时 间 点 创建 测试 计划 的 只 读 快 照 。 

定义 质量 目标 、 进 入 条 件 和 退出 条 件 。 
创建 和 管理 测试 用 例 。 

。 查 看 测试 执行 进度 。 

2) 使 用 测试 用 例 来 测试 设计 

可 以 使 用 测试 用 例 设计 和 构造 功能 来 定义 每 个 测试 用 例 的 整体 设计 。 每 个 测试 用 例 都 
包含 一 个 富 文本 格式 编辑 器 ,可 以 使 用 此 编辑 器 包含 关于 该 测试 用 例 的 背景 信息 。 另 外 , 测 
试用 例 也 可 以 包含 指向 开发 项 和 需求 的 链接 。 可 以 使 测试 用 例 与 其 他 测试 工件 (例如 ,测试 
计划 ,测试 脚本 和 测试 用 例 执 行 记录 ) 相 关联 。 另 外 .还 可 以 将 测试 用 例 组 合成 测试 套件 。 

3) 测试 脚本 的 构造 和 复 用 

Rational Quality Manager 可 提供 全 功能 的 “手动 测试 ?编辑 器 。 可 以 使 用 关键 字 向 手 
动 测试 添加 复 用 和 自动 化 功能 。 

使 用 Rational Quality Manager, 可 以 管理 和 运行 由 IBM Rational Functional Tester、 
IBM Rational Performance Tester、Rational Robot、Rational Service Tester for SOA 
Quality 和 IBM Security AppScan Tester Edition 等 工具 创建 的 测试 脚本 。 

4) 测试 执行 

Rational Quality Manager 包括 集成 的 测试 环境 ,用 于 运行 在 产品 内 开发 的 测试 ,以 及 
创建 于 其 他 手动 、 功 能 性 、 性 能 和 安全 测试 工具 中 的 测试 。 它 提供 了 多 个 用 于 测试 执行 的 
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选项 : 

。 直接 运行 测试 用 例 。 

。 将 测试 用 例 分 组 到 测试 套件 中 以 并 行 或 顺序 方式 执行 。 

。 创建 测试 用 例 和 测试 套件 执行 记录 以 直接 将 测试 环境 信息 映射 至 测试 用 例 和 测试 

套件 。 

5) 测试 分 析 、 报 告 和 实时 视图 

Rational Quality Manager 包括 一 组 预定 义 报告 ,可 帮助 你 获取 项 目的 状态 。 还 可 以 安 
装 可 选 的 Rational Reporting for Development Intelligence 组 件 或 Rational Insight, 以 获取 
更 多 报告 以 及 定制 报告 以 满足 特定 业务 需要 。 

此 外 ,只 需 打 开 测试 计划 或 浏览 测试 计划 列表 并 打开 执行 视图 ,就 可 以 查看 实时 的 测试 
执行 状态 。 通 过 浏览 特定 测试 工件 列表 并 打开 可 跟踪 性 视图 ,可 以 跟踪 测试 工件 .需求 和 开 
发 工件 之 间 的 关系 。 

6) 团队 协作 

Rational Quality Manager 便于 与 团队 其 他 成 员 共 享 信息 。 通 过 在 Rational solution 
for Collaborative Lifecycle Management (CLM) 中 使 用 工作 项 系统 ,团队 成 员 可 以 相互 分 
配 任务 和 指出 缺陷 ,还 可 以 查看 每 个 人 的 状态 。 测 试 计划 作者 和 测试 用 例 设 计 者 可 以 分 发 
复审 工作 并 跟踪 每 个 复审 者 的 状态 。 该 团队 可 以 查看 新 需求 和 已 更 改 的 需求 。 该 团队 也 可 
以 查看 满足 这 些 需求 所 需要 的 测试 用 例 。 团 队 成 员 可 以 查看 登录 的 用 户 及 其 处 理 的 内 容 。 
可 以 自动 通知 团队 成 员 会 影响 其 工作 的 更 改 . 输 入 和 迭代。 

此 外 ,测试 计划 ,测试 用 例 和 测试 脚本 的 作者 可 锁定 其 工件 ,以 防止 其 他 人 对 工件 进行 
编辑 。 

7) 实验 室 管理 

通过 Rational Quality Manager 提供 的 实验 室 管理 能 力 , 可 以 为 测试 计划 中 指定 的 测 
试 环境 创建 请 求 。 然 后 ,可 以 和 实验 室 管理 员 一 起 确保 实验 室 资源 和 测试 环境 在 需要 时 
可 用 。 实 验 室 管理 员 可 以 跟踪 集中 资源 存储 库 的 所 有 实验 室 资源 和 测试 团队 的 服务 
请 求 。 

8) Web 应 用 程序 安全 

Rational Quality Manager 通过 与 IBM Security AppScan Tester Edition 集成 ,可 帮助 
IT 和 安全 专业 人 员 防 止 受 到 攻击 和 数据 违规 的 威胁 。 对 Web 应 用 程序 进行 安全 测试 ,能 
够 以 合理 的 成 本 获得 更 高 质量 .更 加 安全 的 应 用 程序 。 

9) 配置 管理 

可 以 在 Rational Quality Manager 中 使 用 配置 管理 功能 ,以 创建 多 个 版 本 的 测试 工件 
并 将 其 链接 到 其 他 团队 工件 ,例如 ,需求 和 设计 。 使 用 来 自 CLM 应 用 程序 的 配置 ( 流 和 基 
线 ) 管 理 复 用 、 可 跟踪 性 和 并 行 开 发 。 将 配置 组 合 到 全 局 配置 中 ,以 便 在 CLM 应 用 程序 中 
链接 的 工件 版 本 可 正确 解析 。 团 队 可 使 用 其 支持 配置 管理 的 CLM 应 用 程序 向 较 大 的 工作 
环境 添加 需求 设计、 测试 和 全 局 配置 。 全 局 配置 将 添加 的 配置 组 合 到 分 层 树 视 图 中 。 使 用 
全 局 配置 在 软件 、 系 统 或 产品 线 的 多 个 版 本 或 变 体 中 计划 和 管理 配置 的 复 用 。 

详 见 官网 : https://www. ibm. com/support/knowledgecenter/zh/SSJJ9R _ 6. 0. 2/ 


com. ibm. rational. test. qm. doc/topics/c qm overview. html. 
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2.2 TestLink #4 
本 节 介绍 软件 测试 管理 工具 Test Link 的 安装 和 配置 。 
2.2.1 系统 要 求 


TestLink 1.9. 16 服务 器 对 系统 的 要 求 是 : Apache 2.x, PHP 5.4 以 上 版 本 ,MySQL 5.6.x/ 
MariaDB 10. 1. x, Postgres 9. x, MS-SQL 2008/2012. 

客户 端 支持 的 浏览 器 是 : Firefox. IE9 以 上 版 本 ,Google 浏览 器 。 

XAMPP(Apache 十 MySQL 十 PHP 十 PERL) 是 一 个 功能 强大 的 建站 集成 软件 包 。 这 个 
软件 包 原 来 的 名 字 是 LAMPP, 但 是 为 了 避免 误解 ,最 新 的 几 个 版 本 改名 为 XAMPP。 它 可 
以 在 Windows, Linux,Solaris,Mac OS X 等 多 种 操作 系统 下 安装 使 用 ,支持 多 语言 : 英文 、 
简体 中 文 .繁体 中 文 ре вее: ве А 

许多 人 基于 自己 的 经 验 认识 到 安装 Apache 服务 器 不 是 件 容易 的 事 儿 。 如 果 想 添加 
MySQL.PHP 和 Perl, 那 就 更 难 了 。XAMPP 是 一 个 易于 安装 且 包 含 MySQL、PHP 和 
Perl 的 Apache RITH. XAMPP 的 确 非常 容易 安装 和 使 用 : 只 需 下 载 , 解 压缩 ,启动 即 可 。 

XAMPP 的 下 载 地 址 是 : https://www. apachefriends. org/zh_cn/index. html, 

XAMPP 安装 目录 中 有 一 个 可 运行 程序 xampp-control. exe, 双 击 xampp-control. exe, 
启动 XAMPP 控制 面板 ,这 里 只 需 启 动 Apache 和 MySQL 即 可 ,如 图 2.4 所 示 。 


Starting Check-Timer 
Control Panel Ready 
е] Attempting to start Apache app... 
е] Status change detected: running 
Attempting to start MySQL app... 


Status change detected: running 


2.4 XAMPP 控制 面板 


2.2.2 TestLink 的 安装 
1. TR E 


EE http://www. testlink. org FX TestLink, 以 下 以 testlink-1. 9. 16 为 例 。 


将 testlink-1. 9. 16. tar. gz 解压 到 xampp\htdocs 文件 夹 下 ,并 将 文件 夹 名 称 testlink1. 
.16 修改 为 testlink。 


о 
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2. 配置 
在 浏览 器 地 址 栏 输入 http: //localhost/testlink ,将 显示 如 图 2. 5 所 示 的 页 面 。 


You are installing TestUrk 1.9.16 (Moka pot) 


Moreton trom 1.9:3/4/3/6/7/8/9/18/11/12/39/ 14/15 to 3.9.16 (меба pat) remsira емдесе 
changes that has to be done MANUALLY. Please read README file provided with installation. 


For information about Migration from older version please read README file provided with installation. 


Please read Section on README file or go to http: //forum.testlink.org (Forum: TestLink 1.9.4 and 
‘Greater News,changes, etc) 


Open Installation manual for more information or troubleshooting. You could also look at README or Changes Log. 
You are welcome to visit our forum to browse or discuss. 


Some user contributed videos (You Tube) 


w! continue into the far future. 
Iyoung Tein ab, ewe apres коо cB a моол apreement aig 


Р 2.5 TestLink 安装 向 导 1 
单 击 New installation 链接 ,显示 下 一 个 页 面 (版 权 协议 页 面 ), 如 图 2. 6 所 示 。 


@ Acceptance of License 
A Verification of System and configuration requirements. 

ш Definition of DB access 

@ Create DB, testlink DB user, structures and default data В create configuration file. 
A Verify the procedure result and continue to TestLink login. 


—— 


TestLink is developed and shared under GPL license. You are welcome to share your changes with 
community. Please, confirm your understanding below. 


> 


The GNU General Public License is a Free Software license. 
Like any Free Software license, it grants to you the four following freedoms: 


@ The freedom to run the program for any purpose. 

d The freedom to study how the program works and adapt it to your needs. 

9 The freedom to redistribute copies so you can help your neighbor. 

d The freedom to improve the program and release your improvements to the public, so 
that the whole community benefits. 


You may exercise the freedoms specified here provided that you comply with the express conditions 
of this license. The principal conditions are: 


this License and to the absence of any warranty; and give any other recipients of the “ 


ree to the terms set out in this license, 
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92: KREE 


选中 I agree to the terms set out in this license, й ify Continue 按钮 ,将 显示 环境 检查 


页 面 ,如 图 2.7 所 示 。 


Checong É Register Саза OK 

sablea 

Checking MySQL Database OK 

CCheciong Postgres Database 。 Failed! Postgres Database cannot be 
used. 


‘Checking MSSQL Database Failed! MSSQL Database cannot be used. 
Chedóng GD Graphic ibrary OK 
‘Checking LDAP library Failed! LDAP library not enabled. LDAP 


‘Checiong JSON library ок 
[Checking CURL library. ок 
Read ы 


Fg securi ressone we goes II 


[aaia Ea reet m ыссы миынын ө Ok 
= 


xampp \htdocs\testlink\gat\remplates_¢ OK 
кү a watata Dy Van coed а иркин proceed 
Sa ha ed 


Checking if /vaz /Tesrtab/xaspp/htdcca/xestlink/uplcad area/ 
Girectory exists [S] 


tetra rear nn a 
aam aema ma rn ara y apan eed papa ТУ er eg рм ОС Ce ннн 
rt meren nd vat Tetons Ponens fon rem 
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显示 失败 信息 是 因为 没有 相关 文件 目录 ,修改 xampp\htdocs\ testlink 文件 夹 中 的 
config. inc. php 0. 9] $ tlCfg->log_path 和 $g_repositoryPath, 将 它们 指向 适当 的 文 


fpe. ftn. 


$ tlCfg-» 109 path = 
$g repositoryPath - 


"Е: /TestLab/xampp/htdocs/testlink/logs/'; 
'E:/TestLab/xampp/htdocs/testlink/upload area/' 


保存 修改 后 刷新 浏览 器 页 面 ,将 显示 环境 检查 通过 页 面 ,如 图 2. 8 所 示 。 


Checking GD Graphic library OK 

Checking LDAP library Failed! LDAP library not enabled. LDAP. 
authentication cannot be used. (default. 
internal authentication will works). 

Checking 3SON library. ок 

[Checking али. library. ок 

Read ents permissions 


checking if Register Globalsis ок 

[ө 

Checking WsQt Database ок 

[Checking Postgres Database Falled Postgres Database cannot be 
eu. 


Checking MSSQL Database ^ — Failed! MSSQL Database cannot be used. 


CULT that drocoriee tapped wäh T5] on 


————— te 


ox 
ox 
ox 
on | 
Checking: Testa nap aea vestigio area ox 
a 

[:/Testiab/xanpp/edoce/varvisnk/upiced acea] ox 

ооу ag (oy uar tad t ru рента process) 
ED 


图 2.8 TestLink 安装 向 导 4 
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单 击 Continue 按钮 ,将 显示 数据 库 配 置 页 面 ,如 图 2. 9 所 示 。 


Database Configuration 


Define your database to store TestLink data: 


Database Type [MySQUMariaDB (5.6+110.+) т 


Greed 


Note: In the case that you DB connection dosn't use STANDARD PORT for , you need to add ':port number, 
at the end Database host parameter. Example: you use MySQL running on port 6606, on server matrix then 
Database host will be matrix:6606 


Enter the name of the TestLink database . The installer will attempt to create it if not exists. 
— ks — — — — 


Disallowed characters in Database Name: 
The database name can contains any character that is allowed in a directory name, except /’, 'V, or '.'. 


Table prefix festin) (optional) 


Set an existing database user with administrative rights (root): 


FE == 
aa ay == 


This user requires permission to create databases and users on the Database Server. 
These values are used only for this installation procedures, and is not saved. 


Define database User for Testlink access: 


I [ош 
u | -— 


This user will have permission only to work on TestLink database and will be stored in TestLink configuration. 
All TestLink requests to the Database will be done with this user. 


After successfull installation You will have the following login for TestLink Administrator: 
login name: admin 
password : admin 


Селена 
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根据 需要 配置 好 数据 库 , 然 后 单 击 Process TestLink Setup! 按钮 ,将 显示 安装 成 功 提 
示 页 面 , 如 图 2. 10 所 示 。 

在 浏览 器 地 址 栏 输入 http: //localhost/testlink/login. php, 将 显示 TestLink 登录 页 
面 ,如 图 2. 11 所 示 。 可 以 使 用 默认 的 账号 /密码 (admin/admin) 登 录 。 
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__————— 


TestLink setup will now attempt to setup the database: 


Creating connection to Database Server:0K! 


Database testlink does not exist. 
Will attempt to create: 

Creating database `testlink` :OK| 

Creating Testlink DB user ~ admin :OK! ( ok - new user) 
Processing:sql/mysal/testlink_create_tables.sql 

ок! 

Writing configuration file:OK! 


YOUR ATTENTION PLEASE: 
To have a fully functional installation You need to configure mail server settings, following this steps 


copy from config.inc.php, [SMTP] Section into custom, config.inc.php. 


@ complete correct data regarding email addresses and mail server. 


Installation was successful! 
You can now log in to Testiink (using login name:admin / password:admin - Please Click Mel). 


图 2.10 TestLink 安装 向 导 6 


4, TestLink 


1.9.16 (Moka pot) 


图 2.11 TestLink 登录 页 面 


2.2.3 初始 使 用 
初始 使 用 时 ,将 会 显示 创建 测试 项 目 英文 页 面 , 如 图 2. 12 所 示 。 


e Testink шеше Ёш 


m 


2.12 创建 测试 项 目 英文 页 面 


7 


№ 
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单 击 图 2. 12 中 第 一 行 的 admin[Ladmin] 右 边 的 My Settings 图 标 ,将 显示 修改 账号 设置 
页 面 , 如 图 2. 13 所 示 。 


&¿TestLinK admin {admin} 2 98 


Account Settings 


Personal data 

Login | admin 

First Name | Testink 

_ honos = J 

Email | Knmantis@126 com ) 

Locale | [Chinese Simplified v | Last localization update: 2016-01-05 (Testlink 1.9.15) 
(зае) 


图 2.13 修改 账号 设置 页 面 


输入 Email,Locale 选择 Chinese Simplified, 单 击 Save 按钮 ,刷新 浏览 器 页 面 ,将 显示 
创建 新 的 测试 项 目 中 文 页 面 ,如 图 2. 14 所 示 。 


TP RI ra 
one s$ssjsasrr>m>(aam——[AWra 
图 2.14 创建 测试 项 目 中 文 页 面 
输入 名 称 等 项 目 信息 , 单 击 * 创 建 " 按 钮 ,将 显示 创建 的 测试 项 目 列表 页 面 ,如 图 2. 15 所 示 。 


@TestLink “metas 2 S Teak 1.9.16 (oka pot 
242844 m ` meranen] 


search 
У ютеп нама а 
Н 
22:7 
HELP 
H 
H 
LA 
[кетешн ~ 700 


| 
i 
i 


图 2.15 测试 项 目 列表 页 面 


92: “软件 测试 管理 


2.2.4 技能 拓展 : TestLink 的 配置 


在 xampp\htdocs\testlink 文件 夹 中 ,有 一 个 文件 custom, config. inc. php. example, iX 
是 定制 TestLink 的 示例 文件 。 将 它 复制 并 命令 为 custom. config. inc. php, 在 这 个 配置 文 
件 中 的 配置 将 会 覆盖 config. inc. php 文件 中 的 配置 。 利 用 配置 文件 custom. config. inc. 
php ,我 们 可 以 定制 TestLink。TestLink 非常 灵活 ,有 大 量 的 配置 ,以 下 以 邮件 配置 和 与 
Mantis 缺陷 跟踪 系统 集成 配置 为 例 ,讲解 定制 TestLink 的 方法 。 


1. TestLink 邮件 的 配置 


打开 custom. config. inc. php ,找到 SMTP ,一 般 需 要 修改 的 SMTP 配置 项 如 下 ; 


$g smtp host = 'smtp 服务 器 地 址 '; # 设置 SMTP 服务 器 ,例如 ,smtp.126. com 
$ g_tl_admin_email = ' 你 的 Email 地 址 '; # 接收 邮件 的 Email 地 址 
$ g_from_email = "你 的 Email 地 址 '; # 发 送 邮件 的 Email 地 址 


$ g_return_path_email = ' 你 的 Email 地 址 '; # 另 一 个 Email 地 址 


# Urgent = 1, Not Urgent = 5, Disable = 0 
$ g_mail_priority = 5; 


/ жж 
* 发 送 邮件 的 方法 有 三 种 可 供 选择 
* PHPMAILER METHOD MAIL — mail() 
* PHPMAILER METHOD SENDMAIL — sendmail 
* PHPMAILER METHOD SMTP — SMTP 
*/ 
$ g_phpMailer_method = PHPMAILER METHOD SMTP; 


// 如 果 需 要 ,设置 SMTP 的 账号 和 密码 

$g smtp username = ' 你 的 Email 账号 '; + 账号 名 称 ,例如 ,test@126. com 

$ g_smtp_password = ' 你 的 Email 密码 '; # 账号 密码 

应 该 注意 到 ,可 以 提供 三 个 Email 地 址 。 在 做 实 训 @#Testink “mesa es _ 
练习 时 ,可 以 使 用 同一 个 Email 地 址 。 实 际 的 项 目 中 往 


往 需要 提供 三 个 不 同 的 Email 地 址 ,这 样 可 方便 对 
TestLink 的 管理 。 


只 有 配置 了 邮件 ,用 户 才 可 以 自助 注册 账号 ,接收 
TestLink 发 送 的 邮件 。 EX. 


2. 与 缺陷 跟踪 系统 集成 配置 


以 下 以 Mantis 缺陷 跟踪 系统 为 例 介绍 。 单 击 主 
菜单 栏 中 的 主页 图 标 ,主页 左 部 显示 如 图 2. 16 所 示 。 үссен /homerne Overview 
单 击 “ 问 题 跟 踪 系 统 ” 链 接 ,如 图 2. 17 所 示 。 


单 击 “ 创 建 " 按 钮 ,显示 问题 跟踪 系统 管理 页 面 , Ш еван а 
图 2.18 所 示 。 


ee 


图 2. 16 TestLink 主页 左 部 的 菜单 
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4 TestLink  admin[admi]] £ 88 TestLink 1.9.16 (Moka pot 
B3 iads JS Bike [тузе |=] 


图 2.17 创建 问题 跟踪 系统 设置 


#TestLink admin [admin] 27 98 
(223228427 


问题 跟踪 系统 管理 


mants (interface: db) Erea 


图 2.18 问题 跟踪 系统 管理 页 面 


输入 问题 跟踪 系统 配置 名 称 ,选择 配置 类 型 .例如 ,mantis(Interface:db) , 单 击 * 显 示 配 


午 文 件 范例 链接。 将 配置 文件 范例 文本 框 中 的 文本 复制 到 设置 文本 框 ,如 图 2. 19 Bros o 
需要 修改 的 配置 如 下 所 示 : 


< dbhost > localhost </dbhost > 

< dbname > bugtracker </dbname > 

< dbtype > mysql </dbtype > 

< dbuser > root </dbuser > 

< dbpassword ></dbpassword > 

<uriview> http: //localhost/mantis/view. php? id = </uriview> 
<uricreate > http: //localhost/mantis/</uricreate > 


单 击 Check connection 按钮 验证 配置 正确 , 单 击 “ 保 存 ” 按 钮 ,保存 新 建 的 缺陷 跟踪 系统 


配置 ,如 图 2. 20 所 示 。 


问题 跟踪 系统 配置 完成 后 ,在 执行 测试 用 例 时 ,将 可 以 把 执行 失败 的 测试 用 例 与 缺陷 报 


告 系统 中 提交 的 问题 报告 关联 起 来 。 
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#TestLink admin [admin] & S 
[ 135 8 42# m da 


ABRERRSE 


== 


类 型 | [mantis (Interface: db) v) 显示 配置 文件 范例 


IE o [<i Template nantisdbInterface 一 < 
i ssuetracker: 
<abhost>Localhost</abhost> 
dbnane)bugtracker </dbname> 
dbtype mysql ( dbtype? 
<dbuser root </dbuser> 
<abpasswor d>AlFsecret/13¢/dbpassword> 
<uriviewðhttp://10. 60.64. 32/nanti sbt-2.2. 1/vi ew. php?id=</uriview> 
SuricreateDhttp: //10. 60.64, 32/mantisbt-2.2. 1/</uricreate> 
<I- Optional —> 
<statuscfe? 
<status><code10¢/ code><verbose new</verbose><col or #£fala0</ color ></status> 
status? code204/ code) verbose)feedback(/verbose) color2fSaB/ color? 
</status> 
<status<code)30</code><verbose>acknowledged</verbose><color *#£E4850</color> 
status? 
status) codeM04/ code) verbose)confirned(/verbose)colorJ&E£££b04/ color? 
</status> 
<status)<code)50</code<verbose>assi med(/verbose<color ЖеВеВЕ#‹/ color) 

[status - 


Eget 47 Template mantisdbInterface 


<issuetracker> 

<dbhost DATABASE SERVER NANE</dbhost> 
<dbname>DATABASE NAME </dbname> 
<dbtype mysql / уре? 
<dbuser USER</dbuser> 

<dbpasswor d>PASSHORD</ dbpasswor d> 

Suriviewhttp: //localhost-8080/4evelopaent/mantisbt-1 2 5/view. php?id=</uriview? 

Suri create>http: //Localhost :6080/devel opment/mantisbt-1. 2. 5/</uricreate? 

<I-- Optional 一 > 

《statuscEg> 

<status><code>10¢/code><verbose new </verbose><col or #ffale0¢/ color ></status> 
<status><code220¢/ code <verbose feedback</verbose><col or #££5008</ color) status? 
<status><code230¢/code><verbose>acknowledged</verbose><color Ж##4850‹/ color >¢/status> 
<status><code0¢/code><verbose >confirmed(/verbose><color #EfEEDO</ color ></status> 
<status><code>50</code><verbose >assi ged</verbose><col or Жс8с8##</ color ></status> 
<status><code260¢/ code <verbose resolved</verbose<color #eceedd/color></status> 
<status><code>90¢/code><verbose>closed</verbose<color #eBebe8</color></status> 
Ystatuscfe> 

<!—— Configure This if you want NON STANDARD BEHAIVOUR for considered issue resolved 一 >| 
<esolvedstatus> 

Kstatus><code260</code><verbose resolved</verbose></status> 
<status><code?90¢/code><verbose>closed</verbose></status> 

</resolvedstatus> 

</issuetracker> 


图 2.19 配置 文件 范例 
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mantis (Interface: db) 


2.20 问题 跟踪 系统 配置 列表 
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Єз TestLink 操作 演练 


测试 管理 流程 中 主要 的 任务 有 测试 需求 管理 ,测试 用 例 管理 、 测 试 计划 制定 、 测 试用 例 


执行 ,测试 结果 分 析 。 下 面 分 别 介绍 这 些 主要 任务 。 
测试 需求 管理 


测试 需求 是 开展 测试 的 依据 。TestLink 用 产 
品 需 求 规格 组 织 测试 用 例 集 和 测试 用 例 ,而 测试 用 
例 集 是 一 组 相关 的 测试 用 例 。 一 个 测试 项 目 一 般 
包含 一 个 用 户 需 求 规格 、 一 个 系统 需求 规格 (或 者 
只 有 系统 需求 规格 ) 。TestLink 可 以 编辑 需求 规 
格 ,管理 需求 规格 的 多 个 版 本 。 一 个 测试 需求 规格 
可 以 包含 多 个 测试 需求 。 

单 击 “ 主 页 ”一 “产品 需求 规格 ”链接 ,将 显示 
TestLink 主页 .产品 需求 规格 导航 页 面 , 如 图 2. 21 
和 图 2. 22 所 示 。 

单 击 “ 新 建 产 品 需求 规格 ”按钮 ,输入 文档 ID. 
标题 ,选择 类 型 为 系统 需求 规格 , 单 击 “ 保 存 ” 按 钮 ， 
如 图 2.23 所 示 。 

可 以 单 击 “ 选 择 文件 "按钮 将 需求 规格 文档 作 
为 附件 上 传 到 TestLink。TestLink 只 是 对 需求 规 
格 文档 进行 管理 ,需求 规格 的 具体 内 容 在 附件 中 。 

单 击 右 列 左 上 角 的 动作 图 标 ,将 显示 产品 需求 
规格 操作 和 产品 需求 操作 菜单 ,如 图 2. 24 Bron o 


@TestLink admin [admin 2 S 


2.3.1 


@TestLink admin ато] £8 — — 


图 2.21 TestLink 主页 


TestLink 1.9.16 (Moka pot) 
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TYTTWTTIEFUI 


图 2.22 产品 需求 规格 导航 
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图 2.23 新 建 的 产品 需求 规格 


(жиган! | aaa ICEAIESIE CT Li | TEDA | 


Стая (SA || Shae )Саціавев om) | 


图 2.24 产品 需求 规格 操作 和 产品 需求 操作 菜单 


单 击 “ 创 建新 产品 需求 "按钮 ,输入 文档 标识 ,标题 等 ,类 型 选择 为 用 例 (其 他 类 型 还 有 信 
息 的 ,功能 ,界面 .系统 功 能 等 )。 指 定 测试 用 例 数 。 单 击 “ 保 存 ” 按 钮 。 


2.3.2 测试 用 例 管理 


单 击 “ 主 页 ”一 “编辑 测试 用 例 ” 链 接 , 将 显示 主页 、 测 试用 例 导 航 页 面 ,如 图 2. 25 和 
图 2.26 所 示 。 


图 2.25 TestLink 主页 
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图 2.26 测试 用 例 导航 页 面 
单 击 右 列 左上 角 的 动作 图 标 ,将 显示 测试 用 例 集 操作 菜单 ,如 图 2. 27 所 示 。 


zn: © anze жаяяалт J вза 
图 2.27 测试 用 例 集 操作 菜单 
单 击 "新 建 测试 用 例 集 " 图 标 ,将 显示 创建 测试 用 例 集 页 面 ,如 图 2. 28 所 示 。 


Pitas : RAR 


图 2.28 创建 测试 用 例 集 页 面 


输入 组 件 名 称 等 , 单 击 “ 保 存 ” 按 钮 ,继续 输入 另 一 个 组 件 名 称 ,或 单 击 “ 取 消 ” 按 钮 ,如 
图 2.29 所 示 。 
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图 2.29 新 建 的 测试 用 例 集 : 系统 管理 
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在 测试 用 例 导 航 中 选择 测试 用 例 集 , 例 如 ,系统 管理 , 单 击 右 列 左上 角 的 动作 图 
标 ,将 显示 测试 用 例 集 操作 和 测试 用 例 操作 菜单 (注意 , 右 列 第 2 行 的 测试 用 例 集 操作 
应 该 是 测试 用 例 操作 。 这 是 作者 所 用 TestLink 中 文化 版 本 的 一 个 小 Bug) ,如 图 2. 30 
所 示 。 
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图 2.30 测试 用 例 集 操作 和 测试 用 例 操 作 菜 单 


单 击 “ 测 试用 例 操作 ”菜单 中 的 “创建 测试 用 例 ” 图 标 ,将 显示 创建 测试 用 例 页 面 ,如 
图 2. 31 所 示 。 
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图 2.31 创建 测试 用 例 页 面 


输入 测试 用 例 标 题 等 信息 ,然后 单 击 “ 创 建 " 按 钮 ,将 在 测试 用 例 导 航 中 显示 新 建 的 测试 
用 例 ,例如 ,用 户 管理 ,如 图 2. 32 所 示 。 

单 击 “ 创 建 步骤 ”按钮 ,输入 步 又 动作 、 期 望 的 结果 ,选择 执行 方式 (手工 /自动 的 )。 

测试 用 例 可 以 与 产品 需求 关联 ,如 图 2.33 所 示 。 

单 击 产品 需求 右边 的 链接 ,弹出 窗口 ,如 图 2.34 所 示 。 

选中 可 选 的 有 效 产品 需求 ,然后 单 击 “ 指 派 ” 按 钮 ,如 图 2.35 所 示 。 

单 击 “ 关 闭 ” 按 钮 ,关闭 需求 与 测试 用 例 关联 窗口 。 
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图 2.32 新 建 的 测试 用 例 


图 2.34 将 产品 需求 指派 给 测试 用 例 


图 2.35 指派 了 产品 需求 规格 的 测试 用 例 


2.3.3 测试 计划 制定 
单 击 “ 主 页 "链接 ,在 TestLink 主页 的 右边 ,有 测试 计划 管理 菜单 ,如 图 2. 36 所 示 。 


TestLink 1.9.16 (Moka pot] 


图 2.36 主页 右边 的 测试 计划 管理 菜单 


在 右上 角 的 下 拉 列表 框 中 选择 测试 产品 ( 即 前 面 创建 的 测试 项 目 ,例如 ,我 的 测试 项 
目 ), 单 击 “测试 计划 管理 "链接 ,为 测试 项 目 创建 测试 计划 ,如 图 2.37 所 示 。 


@TestLink admin ата] £8 
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图 2.37 创建 测试 计划 页 面 


单 击 “ 创 建 " 按 钮 ,创建 测试 计划 ,如 图 2.38 所 示 。 
输入 名 称 等 信息 ,根据 需要 选中 “活动 “公开 ” 复 选 框 ,然后 单 击 “创建 "按钮 ,如 图 2. 39 


所 示 。 
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图 2.38 测试 计划 编辑 页 面 
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图 2.39 测试 计划 列表 页 面 
单 击 主 菜单 栏 中 的 主页 图 标 ,返回 TestLink 


主页 。 主 页 右 部 将 显示 更 多 的 菜单 ,包括 当前 测试 和 Je 
计划 、 测 试 计 划 管 理 、 测 试 执行 .测试 用 例 集 等 ,如 Е 
N Ri 
图 2.40 所 示 。 计划 管理 
单 击 “ 添 加 /删除 测试 用 例 到 测试 计划 ”链接 ， — — 
选择 测试 用 例 集 ,如 图 2.41 所 示 。 [| — — 
选中 “测试 用 例 ”, 然 后 单 击 “ 增 加 选择 的 测试 ЕЯ 


用 例 ” 按 钮 ,如 图 2.42 所 示 。 


单 击 “ 主 页 ”>“ 指 派 执 行 测试 用 例 ” 链 接 ,提示 


需要 一 个 测试 计划 版 本 ,如 图 2. 43 所 示 。 ОЕ мине 
单 击 “ 创 建 一 个 新 的 版 本 ”链接 ,如 图 2. 44 CE aL 

所 示 。 图 2.40 创建 了 测试 计划 的 测试 
输入 版 本 标识 , 单 击 “ 创 建 ? 按 钮 。 创 建 了 一 个 项 目的 主页 


测试 计划 的 版 本 ,如 图 2.45 Bros 。 
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图 2.41 添加 测试 用 例 到 测试 计划 


第 2 章 ”软件 测试 管理 


#TestLink aol es TestLink 1.9.16 (Moka pot 
ъЪъ®һд4# E ja шуа [me [7] 


r. 

me 2) | | REHAREOISESUSOE h Сінево | NM | | ёш/юеане || caer | 

lancia 图 书 管理 系统 测 _ 

SR al 

м 回 

= 51] [тегше wth Latest version with stans with one of these vas GERRI) wa ot be dled m tho screen 
жө. 

кр 

pe 重要 性 tf = 
Ld hr] + 10000 Ё 2018-06-23 
* G e 100 В 2018-06-23 
ке 

Emt 


图 2.42 将 测试 用 例 分 配给 测试 计划 
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2.43 ”提示 需要 一 个 测试 计划 版 本 


版 本 管理 - ЭЕМ : 图 书 管理 系统 到 试 计划 


创建 一 个 新 的 版 本 
输入 版 本 的 标识 四 
жн. Er HERRE 
at o -|B / и $|% x G % E P Q| 
E] е 
打开 е 
发 布 日 期 [ J 
Брена PENNANEN AETERNE: tabanus, EIDNRZHDHOR. KESEREANHTEE: 
活动 / 停止 - 定义 当前 版 本 是 否 可 以 被 使 用 。 停止 的 版 本 不 会 出 现在 用 例 执行 和 报告 
ИТЕН БИЕР ЫН ЫЫ шант 


图 2.44 创建 测试 计划 版 本 页 面 


单 击 “ 主 页 ”>“ 指 派 执行 测试 用 ince li 例 ”, 如 图 2. 46 所 示 。 
在 “用 户 指派 框 指定 测试 执行 员 ,选中 * 测 试用 例 ”。 然 后 单 击 “执行 ?按钮 ,再 单 击 “* 保 
存 ” 按 钮 ,如 图 2.47 所 示 。 
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图 2.45 测试 计划 版 本 管理 页 面 
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图 2.47 测试 用 例 指派 了 测试 员 


2 . 3 . 4 测 试 执行 EL: rud 


Lu Je 
击 主 菜单 栏 中 的 主页 图 标 ,显示 当前 测试 项 目的 
主页 。 主 页 右 部 显示 如 图 2. 48 所 示 。 minus 
单 击 主页 右 部 菜单 中 的 “指派 给 我 的 用 例 " 链 接 , 查 
看 需要 执行 的 测试 用 例 , 如 图 2. 49 所 示 。 
ТЕЧ: 
例 ”。 输 入 每 一 个 测试 步骤 的 执行 纪要 ,指定 结果 (通过 /。 an 
失败 /锁定 )。 EIDEM USE 
输入 测试 执行 时 间 ( 可 选 ), 设 置 测试 用 例 执行 结果 ( 通 8 207 
过 /失败 /锁定 )。 一 般 来 说 ,测试 用 例 中 的 每 个 步 邓 都 测试 aswa 
通过 才能 将 测试 用 例 设置 为 测试 通过 ,如 图 2. 50 所 示 。 


图 2.48 主页 右 部 菜单 
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图 2. 49 查看 需要 我 执行 的 测试 用 例 


Р 2.50 ”记录 执行 测试 用 例 的 结果 


注意 ,如 果 在 执行 测试 用 例 时 遇 到 错误 “\htdocsNtestlinkNlib\executeN\execSetResults. 
php on line 1533”, 打 开 execSetResults. php ,找到 $ guiObj->design_time_cfields= " K È 
修改 为 $ guiObj-— design time cfields—[ ]. 

对 于 标识 为 测试 失败 的 测试 用 例 ,将 会 显示 测试 用 例 状态 ,如 图 2. 51 所 示 。 


Ф 用 例 执行 历史 - 版 本 标识 V1 
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图 2.51 测试 用 例 状态 


可 以 将 执行 失败 的 测试 用 例 与 缺陷 跟踪 系统 中 报告 的 问题 关联 。 单 击 问题 管理 列 的 
“链接 已 存在 的 问题 "图 标 ,弹出 窗口 ,如 图 2. 52 所 示 。 


4 Testtink == ET 


图 2. 52 将 执行 失败 的 测试 用 例 与 缺陷 跟踪 系统 中 报告 的 问题 关联 
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输入 问题 编号 ,选中 Add Link in Issue Tracker to Test Case Execution Feature, t ił 
“保存 ?按钮 。 


2.3.5 测试 结果 分 析 
单 击 主 菜 单 栏 中 的 主页 图 标 , 显 示 当 前 测试 项 目的 主页 。 主 页 右 部 显示 如 图 2. 53 


所 示 。 
单 击 “测试 报告 和 进度 "链接 ,如 图 2. 54 所 示 。 
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图 2.53 主页 右 部 菜单 图 2. 54 TestLink 提供 了 多 种 测试 报告 和 进度 


利用 这 些 测 试 报告 和 进度 ,可 以 对 测试 过 程 进行 管理 ,对 测试 结果 进行 分 析 。 


Ses 


任务 1: 安装 TestLink ,记录 安 装 过 程 ,编写 安装 说 明 书 。 
任务 2: 编写 资产 管理 系统 测试 计划 ,在 TestLink 中 提交 测试 计划 。 


软件 缺陷 管理 


本 章 主要 内 容 

软件 缺陷 管理 简介 

缺陷 管理 工具 

Mantis 演练 

2009 年 ,Z 公司 在 IBM 咨询 顾问 的 帮助 下 成 立 了 一 个 50 人 的 Oracle EBS 项 目 实施 团 
队 ,负责 Oracle EBS 的 实施 和 二 次 开发 。 实 施 团 队 的 成 员 包括 来 自 IBM 的 ERP 业务 顾 
问 、ERP 技术 顾问 、Z 公司 的 IT 人 员 和 关键 用 户 。 为 了 跟踪 Oracle EBS 的 实施 和 二 次 开发 
过 程 中 发 现 的 问题 ,IBM 咨询 项 目 经 理 建议 使 用 Mantis 管理 项 目 中 的 问题 。Mantis 在 Z 
公司 的 Oracle EBS 项 目 实施 中 发 挥 了 重要 作用 。 从 那 时 开始 , 老 沙 就 对 Mantis 情 有 独 钟 。 
在 以 后 的 项 目 中 都 使 用 了 Mantis。 同 时 见证 了 Mantis 从 版 本 1. 2. 8 升级 到 2.11.1. 

本 章 首 先 介绍 软件 缺陷 管理 的 一 些 基础 知识 ,然后 介绍 缺陷 管理 工具 Mantis 的 使 用 方法 。 


D 什么 是 软件 缺陷 管理 


第 2 章 介 绍 了 事件 管理 ,我 们 知道 ,软件 测试 的 目的 之 一 是 发 现 缺 陷 。 在 测试 过 程 中 ， 
当 发 现实 际 结果 和 预期 结果 之 间 的 差异 时 ,能 够 说 发 现 了 一 个 缺陷 吗 ? 是 不 能 的 ,但 是 应 该 
将 它 作 为 一 个 事件 记录 下 来 。 通 过 确认 ,才能 确定 是 否 发 现 了 一 个 缺陷 。 


3.1.1 软件 缺陷 管理 简介 


为 了 保证 软件 的 质量 ,软件 开发 团队 必须 对 软件 测试 中 发 现 的 缺陷 进行 有 效 管理 ,确保 
测试 人 员 发 现 的 所 有 缺陷 都 能 够 得 到 适当 的 处 理 ,并 且 避 免 处 理 缺陷 时 引入 新 的 缺陷 。 软 
件 缺 陷 管 理 是 软件 测试 的 重要 内 容 之 一 ,为 了 使 于 缺陷 的 管理 ,需要 从 不 同 的 角度 对 缺陷 进 
行 分 类 ,如 缺陷 起 源 、 缺 陷 严重 级 别 、 缺 陷 优先 级 别 、 缺 陷 状态 等 。 缺 陷 的 起 源 已 在 第 1 章 介 
绍 过 ,此 处 不 再 歼 述 。 


1. 缺陷 严重 级 别 


缺陷 严重 级 别 是 指 缺 陷 对 软件 质量 的 影响 程度 。 缺 陷 的 严重 级 别 可 以 从 软件 最 终 用 户 
的 角度 来 判断 ,考虑 缺陷 对 用 户 使 用 软件 所 造成 的 影响 程度 。 缺 陷 严重 级 别 按 从 高 到 低 ,可 
以 分 为 五 个 级 别 , 如 表 3. 1 所 示 。 
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表 3.1 REFERI 


缺陷 严重 等 级 


ж ж 


严重 缺陷 (Critical) 


不 能 执行 正常 工作 功能 或 重要 功能 ,或 者 危及 人 身 安全 。 例 如 : 
1. 操作 或 使 用 某 一 功能 时 ,导致 程序 异常 退出 ,或 其 余 功能 无 法 使 用 ,或 造成 经 
常 性 死机 和 重启 

2. 严重 花屏 

3. 内 存 泄漏 

4. 用 户 数据 丢失 或 破坏 

5. 系统 崩溃 /死机 /冻结 

6. 程序 或 模块 无 法 正常 启动 或 异常 退出 

7. 严重 的 数值 计算 错误 

8. 功能 设计 与 需求 严重 不 符 

9. 导致 其 他 功能 无 法 测试 的 错误 


较 严 重 缺陷 (Major) 


严重 地 影响 系统 要 求 或 基本 功能 的 实现 , 且 没 有 变通 办 法 。 例 如 : 
. 按键 操作 错误 或 失灵 

. 在 客户 环境 本 身 没有 问题 的 情况 下 ,网 络 不 稳 ,频繁 断 线 HR 
. 实现 的 功能 与 相关 需求 严重 不 符 


.语音 或 数据 通信 错误 
. 轻微 的 数值 计算 错误 
. 系统 所 提供 的 功能 或 服务 受到 明显 的 影响 


о юз л = тю н 
E 
= 
# 
ЕУ 


一 般 缺 陷 
(Average Serverity) 


次 要 功能 丧失 ,不 太 严重 ,可 通过 变通 手段 解决 。 例 如 ， 

. 按键 操作 偶尔 失灵 

. 边界 值 的 处 理 无 效 ,重要 界面 的 显示 问题 ,会 对 用 户 产生 一 定 影响 的 文字 错误 
‚ 操作 界面 错误 (包括 数据 窗口 内 列 名 定义 、 含 义 是 否 一 致 7 

. 边界 条 件 显示 错误 

. 提示 信息 错误 (包括 未 给 出 信息 、 信 息 提示 错误 等 ) 

. 长 时 间 操 作 无 进度 提示 

. 系统 未 优化 (性 能 问题 ) 

.光标 跳 转 设置 不 好 ,鼠标 (光标 ) 定 位 错误 


очо лро м к 


次 要 缺陷 
(Minor) 


使 操作 者 不 方便 或 遇 到 麻烦 ,但 它 不 影响 执行 工作 功能 或 重要 功能 。 例 如 ， 
. 字符 串 显 示 不 统一 

. 拼写 .对齐 类 的 错误 `UI 图 标 ,文字 性 错误 

. 界面 显示 不 美观 但 对 用 户 不 产生 影响 的 问题 

. 不 经 常 出 现 而 且 用 户 可 恢复 的 非 严重 问题 

. 辅助 说 明 描述 不 清楚 

. 操作 时 未 给 用 户 提示 

. 可 输入 区 域 和 只 读 区 域 没有 明显 的 区 分 标志 

. 个 别 不 影响 产品 理解 的 错别字 

. 文字 排列 不 整齐 等 一 些小 问题 


CONAN ® Фф гю к 


改进 型 缺陷 


(Enhancement) 


个 别 功能 使 用 不 够 方便 ,但 是 不 影响 用 户 使 用 的 问题 。 例 如 : 
1. 用 户 界面 不 太 友好 
2. 使 用 不 习惯 


缺陷 严重 级 别 可 以 根据 项 目的 实际 情况 划分 。 


2. 缺陷 优先 级 
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缺陷 优先 级 是 指 缺陷 必须 被 修复 的 紧急 程度 。 一 般 来 说 ,严重 级 别 程度 较 高 的 缺陷 具 
有 较 高 的 优先 级 。 严 重 级 别 高 的 缺陷 对 软件 质量 造成 的 危害 大 ,需要 优先 处 理 , 而 严重 级 别 
低 的 缺陷 可 能 只 是 软件 的 一 些 局 部 的 、 轻 微 的 问题 ,可 以 稍 后 处 理 。 但 是 ,严重 级 别 和 优先 
级 并 不 总 是 相对 应 的 。 有 时 候 严重 级 别 高 的 缺陷 ,优先 级 不 一 定 高 ,而 一 些 严重 级 别 低 的 缺 
陷 反 而 需要 及 时 处 理 ,因此 具有 较 高 的 优先 级 。 缺 陷 优先 级 按 从 高 到 低 , 可 以 分 为 三 级 ,如 


X 3. 2 所 示 。 


级 s 


表 3.2 缺陷 优先 级 


ж жй 


立即 解决 (Urgent) 


缺陷 必须 被 立即 解决 


正常 排队 (Normal Queue) 


缺陷 需要 正常 排队 等 待 修复 或 列 人 软件 发 布 清单 


不 紧急 (Not Urgent) 


缺陷 可 以 在 方便 时 被 纠正 


不 同 的 企业 对 缺陷 可 能 有 不 同 的 分 级 。 


3. 缺陷 状态 


缺陷 状态 是 指 缺陷 在 跟踪 管理 过 程 中 对 缺陷 的 处 理 情况 。 主 要 的 缺陷 状态 如 表 3. 3 


所 示 。 


缺陷 状态 


RII 缺陷 状态 
ж ж 


已 提交 /新 建 (Submitted/New) 


可 能 的 缺陷 被 提交 


认可 (Acknowledged) 


开发 团队 收 到 了 被 提交 的 可 能 缺陷 ,还 没有 确认 


已 确认 (Confirmed) 开发 团队 确认 提交 的 是 缺陷 , 等 待 分 配 处 理 
已 拒绝 (Rejected) 拒绝 “提交 的 缺陷 ”, 不 需要 修复 或 不 是 缺陷 
已 分 配 (Assigned) 开发 团队 已 分 配 相关 人 员 处 理 缺 陷 

已 解决 (Resolved) 缺陷 被 处 理 

已 关闭 (Closed) 确认 被 修复 的 缺陷 ,将 其 关闭 


除了 以 上 的 缺陷 状态 ,还 可 以 使 用 其 他 一 些 状态 ,例如 已 修复 (开发 人 员 已 修复 缺陷 ,等 
待 测试 人 员 进 行 回归 测试 )、 重 新 打开 (回归 测试 不 通过 ,重新 打开 缺陷 ,继续 等 待 处 理 ) 等 。 
不 同 的 企业 可 能 使 用 不 同 的 缺陷 状态 跟踪 缺陷 。 


4. 缺陷 管理 流程 


在 软件 缺陷 管理 过 程 中 涉及 不 同 角色 的 人 员 , 例 如 ,测试 组 长 .测试 人 员 、 开 发 人 员 ,不 
同 的 角色 分 工 合作 ,共同 跟踪 处 理 软件 缺陷 。 因 此 ,缺陷 管理 需要 按照 一 定 的 流程 进行 。 缺 


陷 管 理 的 流程 如 图 З. 1 所 示 。 
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提交 缺陷 


重 
n 
打 处 理 缺陷 
开 
Y 
回归 测试 
cj 测试 是 否 通过 ? 


E 


z 


图 3.1 缺陷 管理 流程 


3.1.2 缺陷 管理 工具 


“ 磨 刀 不 误 砍 柴 工 ”使 用 缺陷 管理 工具 可 以 更 好 地 对 缺陷 进行 跟踪 管理 ,特别 是 可 以 通 
过 邮件 提醒 功能 ,及 时 通知 相关 人 员 对 缺陷 进行 处 理 。 缺 陷 管理 工具 使 得 相关 人 员 方 便 地 
查看 我 提交 的 问题 ,分派 给 我 的 问题 .已 解决 的 问题 、 未 解决 的 问题 。 缺 陷 管理 工具 还 可 以 
对 缺陷 管理 的 情况 进行 统计 , 谁 发 现 了 多 少 缺 陷 ? 谁 修复 了 多 少 缺 陷 ? 谁 完成 了 分 派 的 任 
务 ? 等 等 ,便于 激励 相关 人 员 完 成 测试 任务 。 总 之 ,缺陷 管理 工具 的 使 用 可 以 提高 测试 工作 
效率 。 

下 面 简单 介绍 一 些 缺 陷 管 理工 具 。 


1. Mantis 


缺陷 管理 平台 Mantis ,也 称 为 MantisBT, 全 称 Mantis Bug Tracker. 

Mantis 是 一 个 基于 PHP 技术 的 轻 量 级 的 开源 缺陷 跟踪 系统 ,以 Web 操作 的 形式 提供 
项 目 管理 及 缺陷 跟踪 服务 。 在 功能 上 .实用 性 上 足以 满足 中 小 型 项 目的 管理 及 跟踪 。 更 重 
要 的 是 其 开源 ,不 需要 负担 任何 费用 。 

Mantis 是 一 个 缺陷 跟踪 系统 ,具有 多 个 特性 ,包括 易于 安装 ,易于 操作 ,基于 Web ,支持 
任何 可 运行 PHP 的 平台 (Windows、Linux、Mac、Solaris、AS400/i5 等 ) ,已 经 被 翻译 成 68 种 
语言 ,支持 多 个 项 目 ,为 每 一 个 项 目 设 置 不 同 的 用 户 访 问 级 别 ,跟踪 缺 陷 变 更 历史 ,定制 视图 
页 面 ,提供 全 文 搜索 功能 ,内 置 报表 生成 功能 (包括 图 形 报表 ) ,通过 Email 报告 缺陷 ,用 户 可 
以 监视 特殊 的 Bug ,附件 可 以 保存 在 Web 服务 器 上 或 数据 库 中 (还 可 以 备份 到 FTP 服务 器 
上 ) , 自 定义 缺陷 处 理工 作 流 , 支 持 输出 格式 包括 CSV.、Microsoft Excel, Microsoft Word, 
集成 源 代码 控制 (SVN 与 CVS) ,集成 Wiki 知识 库 与 聊天 工具 (可 选 /可 不 选 ) ,支持 多 种 数 
di HE (MySQL.MS SQL, PostgreSQL, Oracle, DB2) ,提供 Web Service(SOAP) 接 口 , 提 供 
Wap 访问 。 
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其 基本 特性 如 : 

。 个 人 可 定制 的 Email 通知 功能 ,每 个 用 户 可 根据 自身 的 工作 特点 只 订阅 相关 缺陷 状 
态 邮 件 。 

支持 多 项 目 、 多 语言 。 

权限 设置 灵活 ,不同 角色 有 不 同 权限 ,每 个 项 目 可 设 为 公开 或 私有 状态 ,每 个 缺陷 可 
设 为 公开 或 和 有 状态 ,每 个 缺陷 可 以 在 不 同 项 目 间 移 动 。 

主页 可 发 布 项 目 相关 新 闻 ,方便 信息 传播 。 

具有 方便 的 缺陷 关联 功能 , 除 重 复 缺 陷 外 ,每 个 缺陷 都 可 以 链接 到 其 他 相关 缺陷 。 
缺陷 报告 可 打印 或 输出 为 CSV 格式 ,1.1.7 版 增加 了 支持 可 定制 的 报表 输出 ,可 定 
制 用 户 输入 域 。 

有 各 种 缺陷 趋势 图 和 柱状 图 ,为 项 目 状态 分 析 提 供 依据 ,如 果 不 能 满足 要 求 ,可 以 把 
数据 输出 到 Excel 中 进一步 分 析 。 

流程 定制 方便 且 符 合 标准 ,满足 一 般 的 缺陷 跟踪 。 

详 见 官方 网 站 : http://www. mantisbt. org/。 


2. Bugzilla 

Bugzilla 是 Mozilla 公司 提供 的 一 款 开源 的 免费 Bug 追踪 系统 , 它 可 以 管理 软件 开发 中 
缺陷 的 提交 修复 、 关 闭 等 整个 生命 周期 。 用 来 管理 软件 开发 ,建立 完善 的 Bug 跟踪 体系 。 

详 见 官方 网 站 : http://www. bugzilla. org/。 

3. Jira 


Jira 是 一 个 优秀 的 对 整个 软件 研发 生命 周期 (包括 计划 、 开 发 发布) 进行 管理 的 项 目 跟 
踪 工具 。 上 万 个 团队 选择 Jira 对 日 常事 务 进行 跟踪 ,并 使 团队 始终 获得 最 新 信息 。 
详 见 官方 网 站 : https://www. atlassian. com/software/jira。 


4. Fogbugz 

Fogbugz 是 世界 上 最 简单 的 Bug 跟踪 系统 ,提供 Wiki 项 目 管理 ,共享 式 计 划 表 、 问 题 
追踪 .电子 邮件 和 讨论 组 等 实用 工具 ,可 以 让 管理 者 方便 地 安排 轻重 缓急 的 任务 顺序 ,以 及 
在 项 目 中 随时 调整 成 员 的 工作 和 监控 进度 。 

详 见 官方 网 站 : http://www. fogcreek. com/fogbugz/. 


5. Youtrack 


Youtrack 是 捷克 JetBrains 公司 旗下 一 款 创新 性 的 以 键盘 操作 为 主 的 问题 和 项 目 跟踪 
工具 ,主要 用 于 开发 过 程 中 的 任务 和 缺陷 修正 安排 跟踪 。 
详 见 官方 网 站 : http://www. jetbrains. com/youtrack/. 


6. Redmine 


Redmine 是 一 个 开源 的 、 基 于 Web 的 项 目 管理 和 缺陷 跟踪 工具 。 它 用 日 历 和 甘 特 图 辅 
助 项 目 及 进度 可 视 化 显示 。 同 时 它 又 支持 多 项 目 管理 。Redmine 是 一 个 自由 和 开放 源码 的 
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软件 解决 方案 , 它 提供 集成 的 项 目 管理 功能 ,问题 跟踪 ,并 为 多 个 版 本 控制 提供 支持 。 

虽说 有 像 IBM Rational Team Concert 这 样 的 商业 敏捷 项 目 管理 工具 ,但 如 果 坚 持 寻找 
开放 源 代码 的 解决 方案 ,会 发 现 Redmine 是 一 个 不 错 的 敏捷 项 目 管理 工具 。 由 于 Redmine 
的 设计 受到 Trac 的 较 大 影响 ,所 以 它们 的 软件 包 有 很 多 相似 的 特征 。 

Redmine 建立 在 Ruby on Rails 的 框架 之 上 ,支持 跨 平 台 和 多 种 数据 库 。 

详 见 官方 网 站 : http://www. redmine. org/。 


7. Trac 


Trac 是 一 个 为 软件 开发 者 设计 的 增强 Wiki 和 问题 的 跟踪 系统 。 它 使 用 非常 简约 的 方 
法 来 管理 基于 Web 的 软件 项 目 。 团 队 的 任务 是 编写 出 杰出 的 软件 ,更 好 地 帮助 其 他 开发 


者 。 此 应 用 完全 免费 ! 


详 见 官方 网 站 : http://trac. edgewall. org/。 


6.2 Mantis 起 步 


本 节 介 绍 软 件 缺陷 管理 工具 Mantis 的 安装 和 配置 。 


3.2.1 系统 要 求 


Mantis 可 以 运行 在 Windows, Linux, MacOS, OS/2, Solari 等 操作 系统 环境 。 此 外 还 
需要 关系 数据 库 .PHP 和 Web 服务 器 的 支持 。 详 细 的 系统 要 求 如 表 3.4 所 示 。 


表 3.4 系统 要 求 
® 型 软 件 最 低 版 本 建议 版 本 备 注 
MySQL 5. 5.35 5.6 或 以 上 PHP extension: mysqli 
MariaDB 5.5.35 10. x 或 以 上 PHP extension: mysqli 
关系 数据 库 PostgreSQL 9.2 9.2 或 以 上 PHP extension:pgsql 
MS SQL Server | 2012 2012 或 以 上 PHP extension: sqlsrv 
Oracle llgR2 llgR2 或 以 上 | PHP extension:oci8 
PHP PHP 5.5.x 7.0 或 以 上 参见 上 面 的 PHP extensions 
Apache 2.2.x 2.4.x 
lighttpd 1.4.x L4. x 
Web 服务 器 nginx 1.10.x 1.10. x 
IIS 7.5 8.0 Windows Server 2008 R2 SP1 或 以 上 
为 了 安装 方便 ,推荐 使 用 XAMPP。 


3.2.2 Mantis 的 安装 


在 Mantis 官网 https://www. mantisbt. org/ 下 载 Mantis, 以 下 以 Mantis 2. 11. 1 为 例 


说 明 。 
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将 mantisbt-2. 11. 1. zip 解压 到 xampp\htdocs 文件 夹 下 ,并 将 文件 夹 名 称 mantisbt- 
2.11.1 修改 为 mantis, 

双击 xampp-control. exe, Ji Z Apache 和 MySQL, 

在 浏览 器 地 址 栏 输入 http://localhost/mantis, 如 图 3.2 所 示 。 


Type of Database 
Hostname (for Database Server) 
Username (for Database) 
Password (for Database) 
Database name (for Database) bugtracker 
Admin Username (to create Database If required) 
Admin Password (to create Database if required) 
Database Table Prefix mantis ‘Sample table name: 
Database Plugin Table Prefix mantis Sample table name: 
Database Table Suffix mantis On Oracle < 12cR2. max length. 
кн < — 
Print SQL Queries instead of writing to the Database E 
== 
l 


图 3.2 Mantis 安装 向 导 


选择 MySQL 数据 库 , 输 入 MySQL 数据 库 root 账号 的 密码 ,选择 适当 的 时 区 (Default 
Time Zone), 。 单 击 Install/Upgrade Database 链接 。 安 装 成 功 后 的 页 面 如 图 3. 3 所 示 。 


checking abilty to INSERT records. 


checking abilty to UPDATE records 


28888 


checking ability to DELETE records 


MantisBT was installed successfully. Please log in as the administrator and croate your first project. onn 


图 3.3 Mantis 安装 成 功 后 的 页 面 


3.2.3 初始 使 用 


在 浏览 器 地 址 栏 输入 http: //localhost/mantis. hz Mantis 登录 页 面 , 如 图 3.4 所 示 。 

用 默认 账号 /密码 (administrator/root) 登 录 ,显示 “编辑 账号 ”页 面 ,如 图 3.5 所 示 。 

修改 administrator 的 默认 密码 , 单 击 “ 更 新 账号 信息 ”按钮 。 用 administrator 账号 和 新 
密码 重新 登录 ,显示 添加 项 目 页 面 ,如 图 3.6 所 示 。 
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* 登录 


administrator š 


敬告: "admin' 目 录 应 被 移 除 ， 或 已 限制 其 访问 权 。 


警告 : 应 该 禁止 默认 ‘administrator 帐号 或 修改 其 密码 


图 3.4 Mantis 登录 页 面 


& 编辑 账号 
APS 


administrator 
* 当前 密码 
"WEB se 
аз 0 5 5 5 5 ll 7 ns 
电子 邮件 khmantis@ 
we 
操作 权限 管理 员 
项 目 访问 级 别 管理 员 
«оа 


图 3.5 编辑 账号 页 面 
输入 项 目 名 称 , 单 击 “ 添 加 项 目 ” 按 钮 ,显示 项 目 管理 页 面 ,如 图 3.7 所 示 。 
3.2.4 技能 拓展 : Mantis 配置 


Mantis 可 以 通过 管理 页 面 和 配置 文件 进行 配置 ,管理 页 面 的 配置 存储 在 数据 库 中 ,有 
两 个 配置 文件 config_defaults_inc. php 和 config_inc. php,config_defaults_inc. php 是 默认 
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d 
我 的 视图 


= 
查看 问题 


a 
变更 日 志 


A 
路 线 图 


(at 
ñz 


% 


管理 


Ф administrator ETE 


项 目 管理 


入 创建 项 目 以 便 记载 问题 。 


b 添加 项 目 


визнане | 


FAB 


图 3.6 添加 项 目 页 面 


Powered by MantsBT 


mantis 


图 3.7 项 目 管理 页 面 


配置 文件 ,config_inc. php. sample 是 配置 模板 ,config_inc. php 是 自 定义 配置 文件 。Mantis 
按照 如 下 顺序 查找 配置 项 。 

数据 库 : 当前 用 户 ,当前 项 目 。 

数据 库 : 当前 用 户 , 所 有 项 目 。 

数据 库 : 所 有 用 户 ,当前 项 目 。 

数据 库 : 所 有 用 户 , 所 有 项 目 。 


config_inc. php. 
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* config defaults inc. php. 
因此 ,建议 不 要 修改 config. defaults inc. php 文件 ,而 是 在 config. inc. php 中 修改 配 


置 项 。 


1. 邮件 配置 
下 面 给 出 一 个 邮件 配置 示例 。 在 config inc. php 文件 中 加 入 如 下 内 容 : 


PPR RRRA HEEE HHHH HHHH HHH 
# Mantis Email Settings 
PPRPP HHEH HEHH HHHH HHHH 


# --- email variables ------------— 

$ g_administrator_email = 'xxxx@2x«x.com'; # xxxx@ xxx. com, 管理 员 邮 箱 

$ 9 webmaster email = 'xxxx@xxx.com'; # хххх@ xxx. com, 另 一 个 管理 员 邮 箱 

# the 'From: 'field in emails 

$g from email = 'хххх@ххх.соп'; # хххх@ ххх. com, Mantis 发 送 邮件 的 邮箱 
# the return address for bounced mail 

$g return path email = 'xxxx@xxx.com'; # xxxx@ xxx. com, Mantis 接收 邮件 的 邮箱 


# allow email notification 

# note that if this is disabled, sign- up and password reset messages will 
# not be sent. $g enable email notification = ON; # 启 用 邮件 通知 

# select the method to mail by: 


# 0 - mail() 

# 1 - sendmail 

# 2 - SMTP 

$g phpMailer method = 2; #0 smtp 发 送 邮件 


* This option allows you to use a remote SMTP host. Must use the phpMailer script 

# Name of smtp host, needed for phpMailer, taken from php. ini $ д smtp host = 'mail.xxx.com:25'; 
# 发 件 邮件 服务 器 的 地 址 ,后 面 加 上 端口 号 25 

# These options allow you to use SMTP Authentication when you use a remote 

# SMTP host with phpMailer. If smtp_username is not '' then the username 

# and password will be used when logging in to the SMTP server. 


$g smtp username = 'xxxxx'; # 发 件 邮箱 的 用 户 名 
$g smtp password = 'xxxxx'; # 发 件 邮 箱 的 密码 
2. 工作 流 配 置 


Mantis 中 默认 的 缺陷 状态 有 : 新 建 、 反 馈 、 认可、 已 确认 、 已 分 配 、 已 解决 .已 关闭 。 工 作 


流 是 使 得 缺陷 从 一 个 状态 转换 到 另 一 个 状态 的 流程 , 它 规定 了 从 一 个 状态 可 以 转换 到 什么 
状态 ,以 及 谁 负责 触发 转换 。Mantis 默认 没有 定义 工作 流 , 这 表明 从 任何 一 个 状态 都 可 以 
转换 到 任何 另 一 个 状态 ,任何 人 都 可 以 触发 状态 转换 。 


管理 员 在 “管理 ”一 “配置 管理 ”工作 流 过 渡 ? 页 面 可 以 定义 工作 流 。 例 如 ,可 以 定义 


如 图 3. 8 所 示 的 工作 流 。 


可 以 自 定 义 缺 陷 状 态 , 具 体 步 骤 如 下 : 
1) 定义 一 个 常数 表示 新 状态 
编辑 子 文件 夹 config 中 的 文件 custom_constants_inc. php( 如 果 这 个 文件 不 存在 ,就 新 


建 一 个 ) 。 
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m ы ы ы в m 


图 3.8 工作 流 示例 


<?php 

# Custom status code 

define( 'TESTING', 60 ); 

2) 用 枚 举 定义 一 个 新 的 缺陷 状态 和 相应 的 颜色 代码 
编辑 子 文件 夹 config 中 的 文件 config inc. php. 


# Revised enum string with new 'testing' status 

$ g_status_enum_string = '10:new,20:feedback, 30: acknowledged, 40 : confirmed, 50 : assigned, 60: 

testing, 80: resolved, 90:closed'; 

# Status color additions 

$ д status colors['testing'] = '#ACE7AE'; 

30 为 新 建 的 缺陷 状态 定义 转移 字符 串 

e s status enum string: 缺陷 状态 语言 字符 串 。 

° s_XXXX_bug_title: 状态 转换 页 面 显示 的 标题 。 

* s XXXX bug button; 状态 转换 页 面 提 交 按 钮 的 标签 。 

e s email notification. title for status bug. XXXX; 邮件 提醒 的 标题 , xxxx 是 
g status enum string 中 定义 的 缺陷 状态 名 称 。 如 果 XXXX 包含 空格 ,那么 在 语言 
字符 串 中 要 用 下 夯 线 代替 空格 (例如 .对 于 '35:pending user' ,使 用 '$s_pending_ 
user_bug_button ') 。 

编辑 子 文件 夹 config 中 的 文件 custom. strings inc. php ,加 入 下 面 的 代码 ， 
<?php 


# Translation for Custom Status Code: testing 
switch( $g_active_language ) { 


case 'chinese_simplified': 
$ 5 status enum string = '10: 新 建 ,20: 反 馈 ,30: 认 可 ,40: 已 确认 ,50: 已 分 配 ,60: 测 试 中 ,80: 
已 解决 ,90: 已 关闭 '; 


$s_testing bug title = ' 正 在 进行 测试 '; 
$s testing bug button = ' 转 到 测试 中 状态 '; 


93 


NA 


94 


Nf 


软件 测试 实战 教程 


$ s_email_notification title for status bug testing = ' 问 题 转 入 测试 中 '; 
break; 


default: # english 
$ s_status_enum_string = '10:new,20:feedback, 30:acknowledged, 40 :conf irmed, 50:assigned, 
60:testing,80:resolved,90:closed'; 


$ s_testing_bug_title = 'Mark issue Ready for Testing'; 
$ s_testing_bug_button = 'Ready for Testing'; 


$ s_email_notification_title_for_status_bug_testing = 'The following issue is ready for 
TESTING. '; 

break; 
) 
4) 如 果 需 要 ,将 新 的 缺陷 状态 增加 到 工作 流 
这 一 步 可 以 在 "管理 ”配置 管理 ”工作 流 过 渡 ? 页 面 完 成 ,也 可 以 编辑 文件 config_ 

inc. php, 如 下 所 示 : 

$g status enum workflow[NEW ] = '30:acknowledged, 20: feedback, 40 : confirmed, $ g_status_enum_ 
workflow[ FEEDBACK] = '30: acknowledged, 40: confirmed, 50: assigned, $g status enum workflow 
[ACKNOWLEDGED] = '40:confirmed, 20: feedback, 50: assigned, 80: resolved'; 
$ д status enum workflow[CONFIRMED] = '50: assigned, 20: feedback, 30: acknowledged, 80: $ g_ 
status enum workflow[ ASSIGNED] = '60: testing, 20: feedback, 30: acknowledged, 40: $g_status_ 
enum_workflow[ TESTING] = '80:resolved, 20: feedback, 50:assigned'; 
$ g_status_enum_workflow[ RESOLVED] = '90:closed, 20: feedback, 50:assigned'; 
$g status enum workflow[CLOSED] = '20:feedback, 50:assigned'; 


50 检查 和 更 新 工作 流 配 置 
保存 编辑 的 配置 文件 ,在 “管理 ”~* 配 置 管理 ”~~* 工 作 流 过 渡 ?* 页 面 单 击 “ 更 改 配置 按 
钮 ,使 配置 生效 。 


8.3 Mantis 操作 演练 


Mantis 的 功能 模块 主要 有 我 的 视图 、 查 看 问题 ,提交 问题 .统计 报表 和 管理 ,一 般 测试 
员 和 开发 人 员 主 要 使 用 我 的 视图 、 查 看 问题 .提交 问题 ,测试 组 长 或 管理 员 才 会 用 到 统计 报 
表 和 管理 。 因 此 ,下 面 只 介绍 我 的 视图 、 查 看 问题 ,提交 问题 的 使 用 。 管 理 员 登录 后 的 页 面 
如 图 3.9 所 示 。 

报告 者 的 页 面 如 图 3.10 所 示 。 


3.3.1 用 户 管理 


用 户 可 以 自助 注册 Mantis 账号 ,自助 注册 的 账号 默认 角色 (操作 权限 ) 是 报告 者 。 管 理 
员 需 要 在 “管理 "“ 用 户 管理 "页 面 给 账号 分 配 权限 、 分 配 测试 项 目 。 管 理 员 也 可 以 创建 用 
户 账号 。 


第 3 章 ”软件 缺陷 管理 


a 4 ansa SEI 


Евин 
m LE a... 
жанада | ал 
g 
жететин. 
тоет LED Gap [— d 
s | 
жене 


LEGE 到 [== M 


A 

таш l 

: 
% 

=. 


4 avant) 
LE doe ca 


EL UE 


sana 0000002 | БРЕ +, БАЈА ECH ELNI 
— DEITAR] Genera -2017.06 200547 


g administratortEiliioooo«s vitii 
unm © 2018-04-06 0424 
s = 

0000004 OBEESIAN кыне Verbindung rum OnyzPiupn moghch rator HA Roono487. 
sane FADAR Genera -2017.0407 11:20 kamas 
A 
mum administrator RET (3880000487 


©2018-0406 0334 


图 3.10 报告 者 的 页 面 


单 击 左 边 控制 面板 中 的 “管理 ?链接 ,然后 单 击 * 用 户 管理 ”标签 页 中 的 “创建 新 账户 ? 按 
钮 ,如 图 3. 11 所 示 。 


& administrator 


图 3.11 “创建 新 账户 ”页 面 
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输入 适当 的 信息 , 单 击 “创建 用 户 ” 按 钮 即 可 。 
单 击 左边 控制 面板 中 的 “管理 ”链接 ,然后 单 击 “ 用 户 管理 ”标签 页 ,如 图 3.12 所 示 。 
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图 3. 12 “用 户 管理 ?页面 


在 这 个 页 面 ,可 以 搜索 用 户 ,编辑 用 户 、 添 加 用 户 至 项 目 等 。 单 击 要 编辑 的 用 户 , 可 以 编 
辑 用 户 , 如 图 3.13 所 示 o 
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图 3.13 编辑 用 户 页 面 


移动 纵向 深 动 条 ,可 以 看 到 “添加 用 户 至 项 目 ”, 如 图 3. 14 所 示 。 

在 这 里 ,可 以 将 用 户 添加 到 测试 项 目 ,并 且 分 配 操作 权限 。Mantis 有 如 下 六 种 角色 / 
权限 。 

。， 观 察 者 : 只 能 查看 问题 。 

。 报告 者 : 可 以 报告 问题 ,将 自己 新 建 的 问题 分 配给 项 目 负 责 人 ,跟踪 自己 报告 的 问 
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图 3.14 添加 用 户 至 项 目 


题 修改 进度 情况 ,关闭 自己 报告 的 已 解决 的 问题 ,重新 打开 自己 报告 的 问题 ,删除 自 
己 报 告 的 问题 。 

升级 者 /修改 人 员 : 对 已 经 报告 的 问题 进行 修改 、 补 充 , 但 不 能 改变 状态 ; 也 可 以 报 
告 问题 。 

FRAR: 开发 人 员 完 成 了 缺陷 处 理 后 ,可 以 将 状态 更 改 为 已 解决 ,并 且 将 问题 分 
派 给 其 他 成 员 。 

经 理 / 测 试 组 长 : 可 以 在 自己 所 负责 的 项 目 中 进行 以 上 人 员 所 能 操作 的 所 有 功能 ， 
创建 经 理 以 下 级 别 的 角色 账户 。 经 理 可 以 更 新 自己 所 负责 的 项 目 信息 ,创建 子 项 
目 , 但 是 不 能 创建 新 的 项 目 。 

管理 员 : 可 以 操作 所 有 功能 。 特 别 是 可 以 创建 项 目 , Mantis 可 以 管理 多 个 测试 项 
目 , 每 个 测试 项 目 都 有 项 目 经 理 。 


3.3.2 我 的 视图 


单 击 左边 控制 面板 中 的 “我 的 视图 ”链接 进入 该 模块 ,系统 根据 当前 登录 角色 信息 ,以 视 
图 的 形式 展现 总 的 问题 状态 信息 ,如 图 3. 15 所 示 。 

其 中 : 

* 未 分 派 的 一 一 还 未 分 派 过 的 问题 列表 。 

。 我 报告 的 一 一 当前 登录 人 员 报 告 的 问题 列表 。 

* 已 解决 的 一 一 已 解决 的 问题 列表 信息 。 

。 最 近 修改 一 一 问题 状态 最 近 发 生 过 变更 或 问题 内 容 发 生 过 修改 的 问题 列表 。 

。 我 监视 的 一 一 当前 登录 人 员 正 在 监督 的 问题 列表 。 

通过 单 击 具体 的 问题 标题 , 即 可 进入 到 查看 问题 详情 页 面 ,登录 和 人员 即 可 根据 自身 所 拥 
有 的 权限 ,进行 如 添加 注释 ,分 派 \ 修 改 状态 、 删 除 、 关 闭 问题 等 操作 。 
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图 3.15 我 的 视图 


3.3.3 提交 问题 


单 击 左 边 控 制 面板 中 的 “提交 问题 "链接 ,系统 进入 到 输入 问题 详情 界面 ,可 以 通过 填写 
表单 的 内 容 完成 Bug 的 报告 工作 ,如 图 3.16 所 示 。 
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图 3.16 输入 问题 详情 页 面 

表单 元 素 说 明 如 下 : 


* 分 类 一 一 所 汇报 的 Bug 所 属 的 类 别 信息 ,如 UI 优 化 、 功 能 Bug、 功 能 改进 等 。 

。 出 现 频率 一 一 所 汇报 的 Bug 在 使 用 过 程 中 的 出 现 频率 信息 ,如 总 是 .有 时 、 随 机、 无 
H^. 

+ 严重 性 一 一 所 汇报 Bug 的 危害 程度 ,如 文字 错误 .小 错误 、 很 严重 、 骨 溃 等 。 
优先 级 一 一 所 汇报 Bug 在 处 理 次 序 上 的 优先 程度 ,分配 到 修改 任务 的 修改 人 将 根据 优 
先 级 的 情况 , 先 修改 紧急 Bug, 优 先 级 包括 无 、 低 、 中 、 高 .紧急 、 非 常 紧急 。 一 般 来 说 , 紧 
急 , 非 常 紧急 的 问题 需要 在 Bug 提出 当天 修改 完成 ; 中 、 高 优先 级 的 任务 需要 在 Bug 
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提出 后 3 天 内 修改 完成 ; 无 级 别 或 低级 别 的 需要 在 Bug 提出 后 1 周 内 修改 完成 。 
摘要 一 一 对 问题 的 简 述 信息 ,参考 格式 为 : 启动 路 径 -问题 简 述 。 如 ,登录 -用 户 信息 
没有 验证 ; 商家 后 台 - 商 品 管理 -添加 商品 -图 片 无 法 上 传 。 

描述 一 一 对 问题 的 详细 描述 。 

问题 重 现 步骤 一 一 发 现 问题 的 操作 步骤 ,所 填写 的 数据 是 什么 ,这 些 都 应 详细 记录 
下 来 以 供 修改 人 员 重 现 Bug 并 进行 问题 的 判断 。 

附注 一 一 对 问题 的 附加 说 明 信 息 ,如 要 求 在 某 个 时 间 段 内 必须 完成 修改 ,一 个 问题 
引发 了 另外 的 问题 等 。 

上 传 文件 一 一 应 尽量 将 操作 过 程 中 出 现 的 问题 截图 并 将 图 片上 传 , 以 方便 开发 人 员 
对 问题 进行 判断 。 图 片 最 大 要 求 2MB。 超 过 的 请 自行 剪 切 。 

查看 权限 一 一 公开 一 所 有 人 均 可 查看 ,私有 一 仅 报告 人 与 分 配 到 任务 的 人 才能 查 
看 。 默 认为 公开 。 

继续 报告 一 一 提交 该 问题 ,并 继续 报告 新 的 问题 。 

提交 报告 一 一 提交 当前 问题 ,并 返回 问题 查看 页 面 。 


问题 报告 人 员 在 提交 了 问题 之 后 可 以 在 问题 查看 页 面 中 查看 到 自己 所 提交 的 问题 信 
息 , 通 过 分 配 问题 操作 将 问题 分 配给 项 目 负 责 人 ,然后 再 由 项 目 负责 人 根据 问题 的 情况 转 分 
配给 对 应 的 修改 人 进行 问题 修改 。 问 题 报 告 人 在 提交 问题 后 应 跟踪 问题 的 修改 进度 ,如 果 


问题 超过 时 间 仍 未 完成 修改 应 加 以 催促 。 
3.3.4 ”处 理 问题 


单 击 左边 控制 面板 中 的 “查看 问题 "链接 ,进入 问题 查看 页 面 ,如 图 3. 17 所 示 。 
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图 3.17 查看 问题 页 面 


通过 单 击 某 一 问题 编号 进入 “查看 问题 详情 "页面, 如 图 3. 18 为 单 击 了 0000004 号 问题 
的 情形 。 
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如 果 该 问题 为 新 建 的 还 未 分 配 的 问题 ,那么 可 以 通过 在 “分 派 给 下拉 列表 框 中 选择 用 
户 账 号 ,将 问题 分 派 给 指定 账号 的 人 员 , 单 击 “ 分 派 给 ”按钮 即 可 完成 问题 的 分 派 操作 了 。 

如 果 该 问题 已 分 派 给 指定 账号 的 人 员 , 则 其 状态 自动 变更 为 已 分 派 。 具 有 权限 的 人 员 
可 以 单 击 “ 将 状态 更 改 为 ”按钮 ,修改 问题 的 状态 。 可 选 的 状态 有 反馈、 认可 \ 已 确认 ,已 分 
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0000004 “OpenOLAT 在 经学 习 管 理 系 统 [所 有 项 目 ] General 公开 2017-04-07 17:18 2018-04-06 18:15 
报告 员 administrator 
分 派 给 
优先 级 中 run ars шит 设 有 试验 
xe Bre ame жнт 
摘要 0000004: 创建 学 习 资 源 错误 Keine Verbindung zum OnyxPlugin möglich. 
юк Ө ID ВЛЕЧЕ ВЕ Keine Verbindung zum OnyxPlugin möglich.” 
问题 重 现 步 要 SAPINE- 

[EL d 

mamap 
вк 设 加 标签 
ms (um пева + | 添加 


， ma | шю | mezan | 关闭 


图 3.18 查看 问题 详情 


配 .已 解决 /已 处 理 . 已 关闭 ,并 且 将 问题 重新 分 派 给 指定 账号 的 人 员 。 


如 果 开 发 人 员 收 到 了 问题 报告 并 确认 问题 存在 ,应 当 将 问题 状态 改 为 已 确认 ,并 注 明 注 


释 信息 ,如 图 3. 19 所 示 。 


=Œ MantisBT 


开发 人 员 处 理 了 问题 后 ,应 将 问题 状态 改 为 已 解决 , 注 明 处 理 结果 和 注释 信息 。 处 理 结 
果 ( 分 辨 率 ,注意 这 是 Mantis 中 文 版 本 的 一 个 Bug, 本 应 翻译 为 处 理 结果 或 处 理 状态 ) 的 选 


di ddministrator зал | 


确认 
эе 
查看 权限 
жшт 


确认 问题 存在 


inana 0000362. 0000439, 000037 0000003, 0000488 | Q. 


图 3.19 ”确认 问题 存在 页 面 


93m HAEE 


项 有 未 处 理 ` 已 修正 
改 , 如 图 3.20 所 示 。 


新 打开 、 无 法 重 现 、 无 法 修复 、 重 复 问 题 \ 不 必 改 、 稍 后 处 理 \ 不 做 修 


== MantisBT 


LÀ А administrator ЕЙ кира 2000129, 0000003, вооа, 0000287, 0000002 | Q. 


т 解决 问题 


ñ 
iiid 
Е] 


解决 问题 


图 3.20 ”标记 问题 的 处 理 状态 


报告 人 员 对 处 理 结果 为 已 修改 的 问题 进行 测试 后 发 现 问题 确实 已 经 修正 的 ,应 当 将 问 
题 状态 改 为 已 关闭 。 这 样 就 完成 了 一 个 问题 的 整个 跟踪 过 程 。 如 果 报 告 人 员 在 对 已 修正 的 
问题 进行 测试 后 发 现 问题 并 未 完全 解决 ,应 加 上 注释 信息 后 将 问题 状态 改 为 反馈 ,再 由 开发 
人 员 进 行 处 理 。 


( 实 训 任务 
„= 
任务 1: 安装 Mantis, 记 录 安 装 过 程 ,编写 安装 说 明 书 。 
任务 2: 组建 测试 小 组 ,分 配角 色 / 权 限 ( 观 察 者 、 报 告 者 、 升 级 者 、 开 发 人 员 经理, 管理 
员 ) ,对 Mantis 进行 测试 ,至 少 提交 一 个 问题 并 进行 处 理 ,编写 测试 报告 。 


本 章 主 要 内 容 

单元 测试 简介 

单元 测试 框架 

JUnit 参数 化 测试 演练 

用 Mockito 进行 隔离 测试 演练 
白 盒 测试 技术 


OpenOLAT 是 一 个 开源 的 在 线 学 习 平台 ,1999 年 ,由 瑞士 苏黎世 大 学 的 计算 机 科学 学 
院 开 发 ,2000 年 9 月 赢得 MEDIDA 奖 ,2001 年 成 为 开源 项 目 ,2014 年 ,2015 年 ,2017 年 赢 
得 了 学 习 管 理 系统 产品 奖 。OpenOLAT 使 用 Java 语言 开发 ,使 用 了 Spring MVC、 
Bootstrap 等 开发 技术 ,使 用 JUnit4 进行 单元 测试 ,使 用 Selenium 作为 自动 化 测试 工具 ,使 
用 SCM hg 作为 源 代码 管理 工具 ,使 用 JIRA 作为 缺陷 管理 工具 ,使 用 Maven 作为 构建 工 
具 , 使 用 Hudson 作为 持续 集成 工具 。 通 过 研究 OpenOLAT, 老 沙 收获 颇 丰 ,不 仅 成 功 将 
OpenOLAT 用 于 某 大 学 网 络 教学 平台 ,还 帮助 某 企 业 搭建 了 企业 知识 管理 平台 。 更 重要 的 
是 ,使 得 老 沙 在 从 软件 开发 领域 转型 到 IT 职业 教育 领域 后 , 仍 保持 与 软件 开发 领域 的 紧密 

本 章 首先 介绍 单元 测试 的 基本 知识 ,然后 介绍 单元 测试 框架 JUnit 的 使 用 方法 ,最 后 介 
绍 单元 测试 用 例 设 计 技 术 一 一 白 盒 测试 技术 。 
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单元 测试 是 V 模型 的 测试 级 别 中 最 低级 别 的 测试 ,单元 测试 是 其 他 级 别 测试 的 基础 。 


4.1.1 单元 测试 简介 


单元 测试 (Unit Testing) 又 称 模块 测试 ,是 对 构成 软件 的 最 小 单元 进行 的 测试 。 在 一 
个 软件 系统 中 ,一 个 单元 是 指 具备 以 下 特征 的 代码 块 : 

+ 具有 明确 的 功能 。 
具有 明确 的 规格 定义 。 
具有 明确 的 与 其 他 部 分 接口 定义 。 
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。 能 够 与 软件 的 其 他 部 分 清晰 地 进行 划分 。 

通常 ,单元 测试 是 针对 源 程序 进行 的 测试 。 例 如 ,在 传统 的 结构 化 编程 语言 中 ,针对 函 
数 或 子 过 程 进行 的 测试 ; 在 Java. NET 或 Ct+ 这 样 的 面向 对 象 语言 中 ,对 类 的 测试 。 换 句 
话说 ,在 不 同 的 编程 语言 中 ,单元 的 划分 是 不 同 的 。 

单元 测试 就 是 依据 软件 详细 设计 说 明 书 ,检查 软件 单元 是 否 符合 软件 详细 设计 说 明 书 
的 要 求 。 单 元 测试 既 可 以 使 用 白 盒 测试 方法 ,也 可 以 使 用 黑 盒 测试 方法 。 白 盒 测 试 是 基于 
代码 的 测试 ,依据 软件 的 编码 实现 ,设计 测试 用 例 ,将 被 测 程序 看 成 是 一 个 透明 的 盒子 ,可 以 
看 到 程序 的 内 部 结构 。 黑 盒 测 试 是 不 用 考虑 软件 是 如 何 编码 实现 的 测试 ,测试 人 员 将 被 测 
程序 看 成 一 个 黑 盒子 ,在 完全 不 考虑 程序 内 部 结构 的 情况 下 ,检查 程序 的 功能 是 否 符合 软件 
需求 规格 说 明 书 的 要 求 。 单 元 测试 通常 采用 的 是 白 盒 测试 方法 。 

单元 测试 依据 : 

。 单元 或 组 件 需 求 说 明 。 

。 详细 设计 文档 。 

。 代码 。 

典型 单元 测试 对 象 : 

。 单 元 或 组 件 。 

。 程序。 

。 数据 转换 /移植 程序 。 

。 数据 库 模 型 。 

在 独立 可 测试 的 软件 中 (模块 ,程序 对象 和 类 等 ), 可 以 通过 单元 /组 件 测试 发 现 缺 陷 ， 
以 及 验证 软件 功能 。 根 据 开发 生命 周期 和 系统 的 背景 ,因为 单元 是 相对 独立 的 ,所 以 可 以 单 
独 对 一 个 单元 进行 单元 测试 。 在 对 一 个 单元 进行 单元 测试 时 ,这 个 单元 与 其 他 单元 的 联系 
通过 使 用 桩 、 驱 动 器 和 模拟 器 来 实现 。 

单元 测试 可 能 包括 功能 测试 和 特定 的 非 功 能 特征 测试 .比如 资源 行为 测试 (如 内 存 泄 
漏 ) 或 健壮 性 测试 和 结构 测试 (比如 分 支 覆 盖 ) 。 根 据 工 作 产 品 ,例如 单元 规格 说 明 、 软 件 设 
计 或 数据 模型 等 设计 测试 用 例 。 

通常 ,通过 开发 环境 的 支持 ,比如 单元 测试 框架 或 调试 工具 ,单元 测试 会 深入 到 代码 中 ， 
而 且 实 际 上 设计 代码 的 开发 人 员 通 常 也 会 参与 单元 测试 。 在 这 种 情况 下 ,一 旦 发 现 缺陷 ,就 
可 以 立即 进行 修改 ,而 不 需要 正式 的 缺陷 管理 过 程 。 

单元 测试 的 一 个 方法 是 在 编写 代码 之 前 就 完成 测试 用 例 的 编写 和 测试 用 例 自动 化 ( 即 
完成 人 工 测 试用 例 和 自动 化 测试 用 例 的 编写 ) ,这 种 方法 被 称 为 测试 优先 的 方法 或 测试 驱动 
开发 。 这 是 高 度 迭代 的 方法 ,并 且 取 决 于 如 下 的 循环 周期 : 测试 用 例 的 开发 ,构建 软件 单元 
和 渐 增 集成 ,执行 单元 测试 ,修正 问题 并 反复 循环 ,直到 它们 全 部 通过 测试 。 

在 进行 单元 测试 时 ,我 们 常用 白 盒 测试 技术 设计 测试 用 例 , 采 用 自动 化 测试 方法 (单元 
测试 框架 ,例如 JUnit\NUnit 等 ) 执 行 单元 测试 。 


4.1.2 单元 测试 框架 


1989 年 ,Kent Beck 为 编程 语言 Smalltalk 开发 了 单元 测试 框架 sUnit.sUnit 是 单元 测 
试 框架 的 鼻祖 ,人们 针对 不 同 的 编程 语言 开发 了 相应 的 单元 测试 框架 ,所 有 这 些 单 元 测试 框 
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架 组 成 了 一 个 大 家 族 ,这 就 是 xUnit , 

JUnit 是 一 个 Java 语言 的 单元 测试 框架 。 它 由 Kent Beck 和 Erich Gamma 开发 ,逐渐 
成 为 xUnit 家 族 中 最 为 成 功 的 一 个 。JUnit 有 它 自己 的 JUnit 扩展 生态 圈 。 多 数 Java 开发 
环境 都 已 经 集成 了 JUnit 作为 单元 测试 的 工具 。 

在 Java 语言 中 ,如 果 写 完 代码 想 要 测试 这 段 代码 的 正确 性 ,那么 必须 新 建 一 个 类 ,再 创 
建 一 个 mainO 方法 ,然后 编写 测试 代码 。 如 果 需 要 测试 的 代码 很 多 呢 ? 那 么 ,要 么 创建 很 
多 main() 方法 来 测试 ,要 么 将 所 有 测试 代码 全 部 写 在 一 个 main() 方法 中 。 这 将 会 大 大 增 
加 测试 的 复杂 度 , 降 低 程 序 员 的 测试 积极 性 。 而 JUnit 能 很 好 地 解决 这 个 问题 ,简化 单元 测 
试 , 写 一 点 测 一 点 ,在 编写 以 后 的 代码 中 如 果 发 现 问题 可 以 较 快 地 追踪 到 问题 的 原因 , 减 小 
回归 错误 的 纠 错 难度 。 

CppUnit 是 一 个 基于 LGPL 的 开源 项 目 ,最 初版 本 移植 自 JUnit, 是 一 个 非常 优秀 的 开 
源 测试 框架 。 它 是 一 个 专门 面向 C++ 的 单元 测试 框架 。 

NUnit 是 xUnit 家 族 的 一 员 , 它 是 一 个 专门 面向 . NET 语言 的 单元 测试 框架 。 

TestNG , 即 Testing Next Generation ,下 一 代 测 试 技术 。 是 根据 JUnit Al NUnit 思想 ， 
采用 JDK 的 注解 (Annotation) 技 术 来 强化 测试 功能 并 借助 XML 文件 强化 测试 组 织 结构 而 
构建 的 测试 框架 。TestNG 的 强大 之 处 在 于 不 仅 可 以 用 来 做 单元 测试 ,还 可 以 用 来 做 集成 
测试 。 

此 外 ,还 有 HtmlUnit.unittest( Python) JsUnit(JavaScript) 等 等 。 

xUnit 测试 也 被 称 为 程序 员 测试 , 即 所 谓 的 白 盒 测试 , 它 需 要 程序 员 知 道 被 测试 的 代码 
如 何 完成 功能 ,以 及 完成 什么 样 的 功能 。 没 有 xUnit ,测试 驱动 开发 将 寸步 难 行 。 

单元 测试 是 非常 重要 的 ,OpenOLAT 项 目 中 使 用 了 大 量 的 单元 测试 。 国 内 对 单元 测试 
重视 不 够 ,许多 程序 员 对 单元 测试 也 知之 其 少 ,即使 有 所 了 解 , 真 正 使 用 了 单元 测试 的 却 不 
多 。 这 种 现象 将 会 影响 到 国内 软件 行业 的 发 展 ,阻碍 优秀 软件 产品 的 出 现 。 


4.2 JUnit #4 


Java 开发 工具 Eclipse 4.5.0 已 经 集成 了 JUnit3/JUnits, F Hi M fE Eclipse 中 使 用 
JUnit 开始 ,体验 一 下 使 用 JUnit 进行 单元 测试 的 过 程 。 


4.2.1 RRM 


按照 下 面 的 步骤 操作 : 
(1) 在 Eclipse 中 创建 一 个 Java 项 目 Test4, 在 Test4 中 创建 一 个 Java 类 Calculator. java. 


public class Calculator { 
public int evaluate(String expression) { 
int sum = 0; 
for (String summand: expression. split("\\+")) 
sum += Integer. valueOf ( summand) ; 
return sum; 
) 
) 
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(2) 右 击 Calculator. java, 再 单 击 弹出 的 快捷 菜单 中 的 New—JUnit Test Case 菜单 项 ， 
进入 如 图 4. 1 所 示 的 界面 。 


JUnit Test Case 
Ф The use of the default package is discouraged. 


© New JUnit 3 test @ New JUnit 4 test 
Source folder: — Test4/src 


Superclass: java.lang.Object 

Which method stubs would you like to create? 
回 setUpBeforeClass0 回 tearDownAfterClass0 
回 setup0 回 tearDown0 
C constructor 

Do you want to add comments? (Configure templates and default value here) 
E Generate comments 


Class under test: Calculator 


图 4.1 创建 JUnit 测试 向 导 
(3) 单 击 Finish 按钮 ,提示 JUnit 4 不 在 构建 路 径 上 ,如 图 4.2 所 示 。 


e JUnit 4 is not on the build path. Do you want to add it? 


© Not now 

© Open the build path property page 

®© Perform the following action: 

BA Add JUnit 4 library to the build path 


图 4.2 增加 JUnit 库 文件 到 构建 路 径 


(4) 单 击 OK 按钮 ,Eclipse 生成 的 CalculatorTest. java 文件 如 下 : 


import static org. junit. Assert. * ; 
import org. junit. Test; 


public class CalculatorTest { 
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@BeforeClass 
public static void setUpBeforeClass() throws Exception { 
} 


@AafterClass 
public static void tearDownAfterClass() throws Exception { 
} 


@Before 
public void setUp() throws Exception { 


(After 
public void tearDown() throws Exception ( 
} 


@Test 
public void test() { 
fail("Not yet implemented") ; 


} 
(5) 修改 CalculatorTest. java 如 下 : 


import static org. junit. Assert. assertEquals; 
import org. junit. Test; 


public class CalculatorTest { 
@BeforeClass 
public static void setUpBeforeClass() throws Exception { 
} 


@AfterClass 
public static void tearDownAfterClass() throws Exception { 
} 


@Before 
public void setUp() throws Exception { 
) 


@ After 
public void tearDown() throws Exception { 
} 


@Test 

public void evaluatesExpression() { 
Calculator calculator = new Calculator(); 
int sum = calculator. evaluate("1+2+3"); 
assertEquals(6, sum); 
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(6) 右 击 Test4 ,在 弹出 的 快捷 菜单 中 单 击 Build Path~Configure Build Path 菜单 项 ， 
进入 如 图 4. 3 所 示 的 界面 。 


8] Properties for Tc = 
[уре filter text} Java Build Path EE | 
"ыйы. ERT 
Java Build Path JARs and class folders on the build path: 
> Java Code Style > Bh JRE System Library [JavaSE-1.8] 
} Java Compiler > mh JUnit 4 
> Java Editor | — Add External JARS) 
Javadoc Location ^ 
Mercurial 
rt == 
Project References 
Refactoring History [Add ase a 
fusing Seis (dd rl Cott 
Server 
> Task Repository == л 
Task Tags 
b Validation Remove 
WikiText 
Migrate JAR File... 
® Сок J( core 


图 4.3 检查 构建 路 径 


可 以 注意 到 在 Test4 项 目的 构建 路 径 中 加 入 了 JUnit4 库 文件 。 
(7) Aü CalculatorTest. java ,在 弹出 的 快捷 菜单 中 单 击 Run As>JUnit Test 菜单 项 ， 
执行 JUnit 测试 用 例 ,进入 如 图 4. 4 所 示 的 界面 。 


| Package Explorer qu JUnit £2 FD] D салоса CalculatorTestjava 51 

See OR|\QRa Br > 1S import static org.junit.Assert.assertEquals; 
Finished after 0.044 seconds 2 import org. junit.Test; 
3 
Rune: ШЕШШ а Errore ШШ © м Š 4 public class CalculatorTest { 
Gram Ü e 
6 Public void evaluatesExpression() ( 


7 Calculator calculator = new Calculator(); 
8 int sum = calculator.evaluate("1+2+3"); 
9 assertEquals(6, sum); 
10 
11 р 


= Failure Trace = 


图 4.4 执行 JUnit 测试 用 例 


4.2.2 JUnit 单元 测试 要 点 


JUnit 单元 测试 要 点 可 以 总 结 如 下 : 
COD 将 JUnit 库 文件 加 入 Java 项 目 构建 路 径 。 
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(2) @BeforeClass.@ AfterClass,@Before,@ After, (2 Test 是 Java 的 注解 ,所 谓 注 解 ， 
是 对 类 或 方法 的 说 明 。 它 们 的 含义 如 下 : 


@Before 一 一 用 它 注解 的 方法 是 初始 化 方法 ,在 每 一 个 测试 方法 执行 前 都 要 执 
行 这 个 方法 (注意 与 @ BeforeClass 的 区 别 ,后 者 在 所 有 测试 方法 执行 前 执行 
—K). 

@After 一 一 用 它 注解 的 方法 用 于 释放 资源 ,在 每 一 个 测试 方法 执行 后 都 要 执行 这 


个 方法 (注意 与 AfterClass 区 别 ,后 者 在 所 有 测试 方法 执行 后 执行 一 次 ) 。 


@Test 一 一 用 它 注解 的 方法 是 测试 方法 ,测试 的 核心 代码 写 在 这 个 方法 中 。 
@BeforeClass 一 一 在 所 有 测试 方法 执行 前 执行 。 
@AfterClass 在 所 有 测试 方法 执行 后 执行 。 


一 个 JUnit4 的 单元 测试 用 例 执行 顺序 为 : 
(@BeforeClass>(@ Before @Test—> @After~> @AfterClass; 


(3) 测试 代码 编写 的 三 部 曲 为 创建 对 象 (实例 化 被 测 类 ) .调用 被 测 类 的 方法 .比较 期 户 
结果 与 实际 结果 (调用 JUnit EP Assert 类 的 方法 ) 。 
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JUnit 操作 演练 


本 节 , 首 先 在 4.2 节 的 基础 上 ,为 一 组 测试 数据 创建 测试 类 。 然 后 ,通过 重 构 测试 类 , 引 
入 参数 化 测试 的 概念 。 最 后 通过 Maven 项 目 演示 了 用 Mockito 框架 隔离 测试 。 


4 


T. 


3.1 参数 化 测试 


跟 我 做 


在 进行 单元 测试 时 ,我们 发 现 很 多 时 候 测试 的 步骤 是 一 样 的 ,只 是 测试 的 数据 不 
同 。 如 果 对 每 组 测试 数据 都 要 编写 测试 代码 , 那 就 是 在 做 重复 工作 。 这 就 需要 参数 化 


测试 。 


假定 有 如 下 的 代码 : 


public class MyClass { 
public int computing(int x, int y) { 


} 
} 


int result; 

if (x<5 |у == 5) { 
result = x + y; 

} else { 
result = x / y; 

) 


return result; 


我 们 设计 了 一 组 测试 数据 ,如 表 4. 1 所 示 。 
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表 4.1 一 组 测试 数据 


序号 x y 预期 结果 x«5 у==5 [x<Slly==5| 路 径 
1 2 1 8 Е Е T 
2 6 5 11 F T Y 
3 6 1 F F F 
4 1 5 Y T T 


可 选 的 测试 数据 是 无 限 的 ,4.4 节 将 介绍 选择 测试 数据 的 方法 。 用 4. 2 节 介 绍 的 方法 ， 


很 容易 写 出 单元 测试 的 代码 ,如 下 所 示 : 


//import + 
public class MyClassTest { 


@Test 
public void test() { 
MyClass mc = new MyClass(); 
int rs = mc. computing(2,1); 
assertEquals(3, rs) ; 
} 
} 


现在 把 这 段 代码 重 购 为 参数 化 测试 ,如 下 所 示 : 
//import. 


@RunWith(Parameterized. class) 
public class MyClassTest { 
int x,y, ex; 


@Parameters 
public static Collection data() { 
return Arrays. asList(new Object[][]{ 
{2,1,3}, 
16,5, 91), 
{6,1,6}, 
{1,5,6} 
р; 
) 


public MyClassTest(int x, int y, int ex) ( 
this.x = x; 
this.y = y; 
this. ex = ex; 


} 


@Test 

public void test() { 
MyClass mc = new MyClass(); 
int rs = mc. computing(x, y); 
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assertEquals(ex, rs); 
} 
} 


2. 代码 分 析 


用 注解 @RunWith (Parameterized. class) 将 测试 类 MyClassTest 标注 为 参数 化 测试 
类 ,参数 化 测试 类 将 在 测试 运行 器 Parameterized. class 中 运行 ,在 JUnit 中 有 很 多 测试 运行 
器 ,它们 负责 调用 测试 类 。 每 一 个 测试 运行 器 有 各 自 的 特殊 功能 。 我 们 应 该 根据 需要 选择 
不 同 的 测试 运行 器 来 运行 测试 代码 。JUnit 有 一 个 默认 的 测试 运行 器 ,如 果 没 有 指定 , 则 系 
统 自 动 使 用 默认 的 测试 运行 器 运行 测试 代码 。 

定义 三 个 类 变量 x、y、ex, 分 别 用 于 存储 测试 输入 数据 和 期 望 值 ; 创建 了 一 个 带 参数 的 
构造 函数 MyClassTest(int x,int y,int ex) ,用 于 传递 测试 数据 (参数 ) 。 

我 们 创建 了 一 个 静态 方法 data() ,返回 类 型 为 Collection ,用 注解 @Parameters 标注 这 
个 方法 ,表示 它 是 提供 测试 数据 (参数 ) 的 方法 。 测 试 运行 器 Parameterized. class 将 会 利用 
这 个 方法 逐次 读 取 测 试 数据 ,运行 测试 代码 。 方 法 名 可 以 是 任何 符合 语法 要 求 的 名 称 。 

我 们 在 测试 方法 中 用 参数 代 蔡 了 具体 的 测试 数据 。 


3. 参数 化 测试 要 点 


由 上 面 的 示例 ,可 以 总 结 得 出 参数 化 测试 要 点 如 下 : 

。 用 注解 @RunWith(Parameterized. class) 将 测试 类 标注 为 参数 化 测试 类 。 

。 定义 若干 类 变量 ,分别 用 于 存储 测试 输入 数据 和 期 望 值 。 

* 创建 返回 类 型 为 Collection 的 静态 方法 ,用 注解 @Parameters 标注 这 个 方法 。 
* 在 测试 方法 中 用 参数 代替 具体 的 测试 数据 。 


4.3.2 用 Mockito 隔离 测试 


1. Mockito 简介 


在 实际 的 软件 开发 过 程 中 ,类 与 类 是 有 关联 的 ,我 们 常常 是 把 相关 联 的 类 写 好 后 ,再 
对 每 个 类 进行 单元 测试 ,这 种 做 法 不 符合 单元 测试 的 思想 。 单 元 测试 的 思想 是 在 不 涉及 
依赖 关系 的 情况 下 测试 单元 代码 ,例如 ,被 测 代 码 所 需要 的 依赖 可 能 尚未 开发 完成 ,甚至 
还 不 存在 ,如 何 进行 单元 测试 ? 测试 驱动 开发 如 何 做 到 先 写 测试 代码 ,再 写 被 测 代 码 ? 
这 些 问 题 的 解决 方案 是 对 被 测 单元 进行 隔离 。 隔 离 的 方法 有 两 种 : 插 桩 (Cstub) 和 模拟 技 
Ж Стос) 。 

桩 是 一 段 代 码 ,通常 在 运行 期 间 使 用 插入 的 桩 代替 真实 的 代码 ,以 便 将 其 使 用 者 与 真正 
的 实现 隔离 开 来 。 这 种 方法 有 如 下 缺点 : 

* 桩 往往 比较 复杂 难以 编写 ,并 且 它 们 本 身 还 需要 调试 。 

。 因为 桩 的 复杂 性 ,它们 很 难 维护 。 

* 桩 不 能 很 好 地 运用 于 细 粒 度 测试 。 

。 不 同 的 情况 需要 不 同 的 插 桩 策略 。 
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模拟 技术 是 用 模拟 对 象 代替 被 测 单元 依赖 的 对 象 , 从 而 达到 被 测 单元 与 其 依赖 的 隔离 。 
其 基本 思想 与 插 桩 相同 ,不 同 的 是 , 插 桩 需要 编写 依赖 的 简单 实现 代码 ,用 简单 实现 代 蔡 复 
杂 的 真实 实现 ; 而 模拟 技术 不 需要 编写 依赖 的 任何 实现 代码 ,模拟 对 象 只 是 模拟 依赖 的 
行为 。 

虽然 我 们 可 以 自己 编写 自 定义 的 模拟 对 象 实现 模拟 技术 ,但 是 编写 自 定义 的 模拟 对 象 
需要 额外 的 编码 工作 ,同时 也 可 能 引入 错误 。 现 在 实现 模拟 技术 的 优秀 开源 框架 有 很 多 ， 
Mockito 就 是 其 中 一 个 优秀 的 用 于 单元 测试 的 模拟 技术 框架 。Mockito 已 经 在 Github ЕЛ 
源 , 详 细 情 况 请 访问 https://github. com/mockito/mockito。 

除了 Mockito 以 外 ,还 有 一 些 类 似 的 框架 ,比如 : 

。 EasyMock 一 一 早期 比较 流行 的 Mock 测试 框架 。 它 提供 对 接口 的 模拟 ,能 够 通过 
录制 回放、 检查 三 步 来 完成 大 体 的 测试 过 程 ,可 以 验证 方法 的 调用 种 类 、 次 数 , 顺 
序 ,可 以 令 模拟 对 象 返 回 指定 的 值 或 抛 出 指定 异常 。 

PowerMock 一 一 这 个 工具 是 在 EasyMock 和 Mockito 上 扩展 出 来 的 ,目的 是 为 了 
解决 EasyMock 和 Mockito 不 能 解决 的 问题 ,比如 对 static, final, private 方法 均 
不 能 模拟 。 其 实测 试 架构 设计 良好 的 代码 ,一般 并 不 需要 这 些 功 能 ,但 如 果 是 
在 已 有 项 目 上 增加 单元 测试 , 老 代 码 有 问题 且 不 能 修改 时 ,就 不 得 不 使 用 这 些 
功能 了 。 

JMockit 一 一 JMockit 是 一 个 轻 量 级 的 模拟 技术 框架 ,是 用 于 帮助 开发 人 员 编 写 测试 
程序 的 一 组 工具 和 API, 该 项 目 完全 基于 Java 5 SE 的 java. lang. instrument 包 开 
发 ,内 部 使 用 ASM 库 来 修改 Java 的 Bytecode。 

Mockito 已 经 被 广泛 应 用 ,所 以 我 们 以 Mockito 为 例 讲解 模拟 技术 。 

Mockito 是 模拟 技术 框架 , 它 让 你 用 简洁 的 APT 做 测试 。Mockito 简单 易学 , 它 具 有 可 
读 性 强 和 验证 语法 简洁 的 优点 。 测 试 驱动 的 开发 (TDD) 要 求 我 们 先 写 单元 测试 ,再 写实 现 
代码 。 在 写 单元 测试 的 过 程 中 ,往往 会 遇 到 要 测试 的 类 有 很 多 依赖 ,这 些 依赖 的 类 /对 象 / 资 
源 又 有 别 的 依赖 ,从 而 形成 一 个 大 的 依赖 树 , 要 在 单元 测试 的 环境 中 完整 地 构建 这 样 的 依 
赖 ,是 一 件 很 困难 的 事情 。Mockito 可 以 解决 这 些 问题 。 


2. 跟 我 做 


以 下 通过 示例 演示 Mockito 的 使 用 。 

1) 在 Eclipse 中 新 建 Maven 项 目 

(1) 单 击 File>New Maven Project 菜单 项 ,进入 如 图 4.5 所 示 的 界面 。 

(2) 选中 Createa simple project(skip archetype selection) . "fit; Next 按钮 ,如 图 4. 6 
所 示 。 

(3) 单 击 Finish 按钮 。 

2) 创建 被 测 类 

假定 要 求 编写 一 个 更 新 数据 库 表 的 程序 ,例如 ,更 新 数据 表 User。 通 常会 写 三 个 类 
User, UserDao 和 UserService。 已 经 编写 了 User 和 UserService 类 ,如 下 所 示 。UserDao 
类 实现 对 数据 库 的 操作 ,现在 还 没有 编写 ,如 何 进 行 单元 测试 ? 
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New Maven project 
Select project name and location 


m 


[V] Create a simple project (skip archetype selection) 


[V] Use default Workspace location 


Location: [| 


[E] Add project(s) to working set 


Working set: | 


› Advanced 


Group 1d: combzcollege 


Artifact Id: | nockito 
Version: 0.0.1-SNAPSHOT 
Packaoino: iar 

Parent Project. 


Group Id: 


Artifact Id: 


Version: 


| > Advanced 


图 4.6 创建 Maven 项 目 向 导 2 


public class User { 


private int id; 
private String name; 
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public Оѕег(іп id, String name) { 
this. id = id; 
this.name = name; 


public int getId() { 
return id; 


public String getName() { 
return name; 


public void setName( String name) { 
this. name = name; 


public class UserService { 


private final UserDao userDao; 
private User user; 


public UserService(UserDao userDao) { 
this. userDao = userDao; 


public boolean update(int id, String name) { 
User user = userDao. getUser(id) ; 
if (user == null) { 
return false; 


User userUpdate = new User(user. getId(), name); 
return userDao. update(userUpdate) ; 


) 
3) 编写 一 个 接口 ,代替 UserDao 


public interface UserDao { 


User getUser(int id); 
boolean update(User user) ; 
} 


4) 在 配置 文件 pom. xml 中 增加 依赖 


< dependencies > 
< dependency > 
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< groupId> junit </groupId> 
<artifactId> junit </artifactId> 
< version» 4.12</version> 
< scope > test </scope > 
</dependency> 
< dependency > 
< groupId > org. mockito </groupId> 
«artifactId» mockito- соге </artifactId> 
< version» 2.19.0 «/version» 
«/dependency » 
< dependency > 
< groupId> com. h2database </groupId> 
<artifactId> h2 </artifactId> 
< version» 1. 4.196 </version> 
</dependency> 
</dependencies > 


5) 编写 测试 类 
import … … 
public class UserServiceTest { 


private UserDao mockDao; 
private UserService userService; 


@Before 
public void setUp() throws Exception { 
// 模 拟 userDao 对 象 
mockDao = mock(UserDao. class); 
when(mockDao. getUser(1)).thenReturn(new User(1, "user1")); 
when(mockDao. update( isA(User.class))).thenReturn(true); 


userService = new UserService(mockDao) ; 


(Test 
public void testUpdate() throws Exception ( 
boolean result = userService. update(1, "new name"); 
assertTrue("must true", result); 
// 验 证 是 否 执行 过 一 次 getuser(1) 
verify(mockDao, times(1)).getUser(eq(1)); 
// 验 证 是 否 执 行 过 一 次 update 
verify(mockDao, times(1)).update(isA(User.class)); 


GTest 

public void testUpdateNotFind() throws Exception ( 
boolean result = userService.update(2, "new name"); 
assertFalse("must false", result); 
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6) 执行 Maven 测试 任务 , 右 击 项 目 浏 览 器 中 的 pom. xml, 再 单 击 弹出 的 快捷 菜单 中 的 
Run As—6 Maven test 菜单 项 ,执行 结果 如 图 4.7 所 示 。 


Ë userService = new UserService(mockDao); 
Bi com hacollege-hello: 23 ) 
> B) Userjava 24 
› [Ë UserDacjava 255 Test 
> D) UserServicejava. 26 public void testUpdate() throws Exception { 
© 08 src/main/resources 27 boolean result = userService.update(1, "пем name"); 
4 $8 srcftest/java 28 assertIrue("must true", result); 
“ Biconhuslegelslo | 29 // 验 证 是 否 执行 过 一 次 getuser(1) 
>  UserSenicetestjova | 30 verifv(mockDao, times(1)).getUser(eq(1)); - 
> 08 srcRestresources a , 
D m JRE tem Library [J2SE-1. 
Pm Mee beenden. a [Ë Maken неран i Seners B Dota Source ploren IE Sapat] © Console =: [юрты =O) 
> Bare m X а 22 2 (0) м о - гі 
> @ target <terminated> FlesVavaVdkL80 121\bin\javaw.exe (2018 年 6 月 30 日 上 午 9.58.05) 
В pomami Results : 
Tests run: 2, Failures: 0, Errors: 0, Skipped: 9 
I Ert а 
[INFO] BUILD SUCCESS 
` > (€ — m—À 
图 4.7 测试 结果 
3. 代码 分 析 


在 测试 类 中 ,mock() ,whenO ,thenReturnO ,eqO ,isA O .verify() 是 我 们 还 不 了 解 的 。 
这 些 都 是 Mockito 框架 提供 的 。mock CO, when ( ), verify С) 是 类 Mockito 的 方法 ; 
thenReturn() 是 类 OngoingStubbing 的 方法 ; едО \isA() 是 类 ArgumentMatchers 的 方法 。 

在 setUp() 方 法 中 用 类 Mockito 的 mock() 方 法 创建 了 未 实现 的 类 UserDao 的 模拟 对 
象 mockDao ,并 且 用 when…thenReturn 模拟 UserDao 的 行为 (操作 )。 我 们 模拟 从 数据 库 
获取 了 一 个 id 是 1,name 是 userl 的 用 户 (User); 还 模拟 了 调用 UserDao 的 update 方法 ， 
当 方法 的 参数 是 User 类 型 时 ,方法 返回 了 true。 然 后 用 mockDao 这 个 模拟 对 象 创建 一 个 
UserService 实例 userService。 应 该 能 够 体会 到 用 @Before 注解 的 方法 的 作用 , 它 是 测试 准 
备 代码 。 我 们 在 这 个 方法 中 创建 了 实例 userService, 在 两 个 测试 方法 testUpdate() 和 
testUpdateNotFind() 中 都 使 用 了 这 个 实例 。 

在 测试 方法 testUpdate() 中 ,调用 userService 的 update() 方 法 ,对 id 是 1 的 用 户 进行 
更 新 ,将 其 名 称 更 新 为 new пате; 然后 用 断言 assertTrue 比较 update() 方 法 的 返回 值 和 期 
望 值 。 还 用 类 Mockito 的 verify 方法 验证 是 否 执 行 过 一 次 getUser(1) 和 Update() 方 法 。 
其 中 edqC0) 和 isA() 是 参数 匹配 器 ArgumentMatchers 类 的 两 个 方法 。 

在 测试 方法 testUpdateNotFind() 中 ,调用 userService 的 update 方法 ,对 id 是 2 的 用 
户 进行 更 新 ,将 其 名 称 更 新 为 new name。 由 于 我 们 没有 模拟 数据 库 表 中 有 id 为 2 的 用 户 ， 
所 以 update() 方 法 的 期 望 返回 值 是 false。 然 后 用 断言 assertTrue 比较 update() 方 法 的 返 
回 值 和 期 望 值 。 
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4.4 白 盒 测试 技术 


4.3 节 介绍 了 如 何 使 用 JUnit 执行 单元 测试 ,尽管 通过 使 用 参数 化 测试 ,可 以 提高 测试 
工作 的 效率 。 但 是 ,我 们 也 知道 ,穷尽 所 有 测试 是 不 可 能 的 。 如 何 选 择 测试 数据 ,使 得 测试 
更 有 效 ,就 引出 了 非常 重要 的 问题 一 一 设计 测试 用 例 。 

所 谓 测试 用 例 , 是 指 为 了 某 个 特定 的 测试 目标 而 设计 的 一 组 测试 输入 、 执 行 条 件 以 及 预 
期 结果 。 测 试用 例 的 内 容 一 般 包括 测试 目标 、 测 试 环境 、 输 入 数据 、 测 试 步 又、 预期 结果 、 测 
试 脚本 等 。 

白 盒 测 试 技术 是 一 种 经 典 的 设计 测试 用 例 的 技术 ,利用 白 盒 测 试 技术 ,可 以 用 尽 可 能 少 
的 测试 用 例 , 到 达 某 种 测试 覆盖 ,进行 相对 有 效 的 测试 。 


4.4.1 语句 覆盖 


设计 测试 用 例 的 目标 是 用 尽 可 能 少 的 测试 用 例 取 得 尽 可 能 好 的 测试 效果 。 如 何 设计 测 
试用 例 呢 ? 人 们 自然 会 想到 ,设计 测试 用 例 时 ,至 少 要 把 每 一 行 语句 都 执行 一 遍 吧 。 如 果 没 
有 设计 足够 多 的 测试 用 例 ,使 得 每 一 行 语 句 都 执行 一 遍 , 就 可 以 认为 测试 是 不 充分 的 。 在 设 
计 测 试用 例 时 ,选择 足够 多 的 测试 用 例 ,使 得 被 测 程序 的 每 一 行 语句 都 至 少 执行 一 遍 。 这 种 
设计 测试 用 例 的 方法 称 为 语句 覆盖 。 

单元 设计 要 求 : 设计 一 个 方法 ,输入 两 个 整 型 参数 x、y, 当 x 小 于 5 或 者 y=5 时 ,将 
x 和 y 的 和 作为 结果 返回 ; 否则 ,将 x 和 y 的 商 作 为 结果 返回 。 

单元 实现 (存在 错误 ): 

public class MyClass { 

public int computing( nt x, int y) { 

int result; 

if (x<5 &y == 5) { 
result = x + y; 

} else { 
result = x / y; 


) 


return result; 
) 
} 
根据 上 面 的 代码 ,可 以 设计 如 表 4. 2 所 示 的 测试 用 例 集 ,使 得 所 有 的 语句 都 执行 过 至 少 
一 遍 , 即 实现 了 语句 覆盖 。 


R42 语句 覆盖 测试 用 例 集 


序号 x y 预期 结果 x<5 у==5 |x«5&&y--5| 备注 
1 2 5 7 T T T 
2 6 6 1 F F F 


用 语句 覆盖 设计 的 测试 用 例 ,能 够 发 现 程 序 的 所 有 错误 吗 ? 显然 是 不 能 的 。 要 求 我 们 
实现 的 是 “ 当 x 小 于 5 或 者 y=5 时 将 x 和 y 的 和 作为 结果 返回 ,但 是 程序 实现 的 却 是 “ 当 
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x 小 于 5 并 且 y—5 时 将 x 和 y 的 和 作为 结果 返回 ”。 这 个 例子 说 明 语句 覆盖 不 能 发 现 判定 
中 的 问题 。 还 说 明了 设计 单元 测试 用 例 不 仅 依赖 于 单元 代码 ,还 依赖 于 单元 设计 ,最 终 依 赖 
于 用 户 需求 。 因 此 ,人 们 想到 了 判定 覆盖 。 


4.4.2 判定 覆盖 


任何 编程 语言 都 有 顺序 语句 、 分 支 语句 和 循环 语句 这 三 种 基本 语句 , 正 是 有 了 分 支 语 句 
和 循环 语句 , 才 使 得 我 们 可 以 通过 编程 完成 复杂 的 重复 性 的 工作 。 也 正 是 因为 分 支 语句 和 
循环 语句 , 才 使 得 程序 变 得 复杂 了 ,会 出 现 各 种 各 样 的 情况 。 简 单 地 说 ,设计 测试 用 例 的 目 
标 就 是 要 选用 尽 可 能 少 的 测试 用 例 ,把 各 种 各 样 的 情况 都 测试 一 遍 。 人 们 注意 到 决定 分 支 
的 判定 语句 是 容易 出 错 的 地 方 。 所 以 希望 通过 设计 足够 多 的 测试 用 例 ,使 得 程序 中 的 每 个 
判定 至 少 都 获得 一 次 * 真 ” 值 和 *“ 假 ” 值 , 也 就 是 使 程序 中 的 每 个 取 * 真 ”分 支 和 取 “ 假 ”分 支 至 
少 均 经 历 一 次 ,这 种 设计 测试 用 例 的 方法 称 为 判定 覆盖 ,也 称 为 “分 支 覆盖 ”。 

修改 后 的 单元 实现 : 


public class MyClass { 
public int computing(int x, int у) { 
int result; 
if (x<5 || y == 5) { 
result = x + y; 
} else { 
result = x /y; 


} 
return result; 
} 
} 


根据 上 面 的 代码 ,可 以 设计 如 表 4.3 所 示 的 测试 用 例 集 ,使 得 程序 中 的 一 个 判定 (x < 
5 lly == 5) 取 ”真光 假 " 值 各 一 次 , 即 实现 了 判定 覆盖 。 


表 4.3 判定 覆盖 测试 用 例 集 


序号 x y 预期 结果 x<5 y==5 |х<5 |у==5| ЖЕ 
1 2 6 8 т Е T 
2 6 6 1 F F F 


上 面 的 测试 用 例 集 也 满足 语句 覆盖 的 要 求 , 事 实 上 ,如 果 不 考虑 循环 语句 ,那么 满足 判 
定 覆 盖 要 求 的 测试 用 例 集 一 定 满足 语句 覆盖 。 由 于 循环 语句 可 以 一 次 都 没有 执行 ,因此 ,一 
般 来 说 ,满足 判定 覆盖 的 测试 用 例 集 不 一 定 满足 语句 覆盖 。 

进一步 地 ,我 们 注意 到 , 当 х=6.у=5 时 ,上 面 的 程序 就 会 出 现 问 题 。 之 所 以 上 面 的 测 
试用 例 集 不 能 发 现 这 个 问题 ,是 因为 虽然 测试 了 x—5 和 x— 5 的 情况 ,但 只 测试 了 y<>0 
的 情况 ,没有 测试 y=0 的 情况 , 当 x=6.y=0 时 ,程序 将 执行 语句 result=x/y。 组 成 判定 
的 条 件 是 复杂 的 ,还 应 该 对 组 成 判定 的 各 个 条 件 进 行 测试 。 


4.4.3 === 


г ELA og 
都 至 少 出 现 一 次 。 这 种 设计 测试 用 例 的 方法 称 为 条 件 覆 盖 。 


117 


МА 


118 


Nf 


软件 测试 实战 教程 


根据 代码 ,可 以 设计 如 表 4. 4 所 示 的 测试 用 例 集 ,使 得 程序 中 的 一 个 判定 (x <5 | | 
у= =5) Wi ALE x<5 和 y==5 都 能 取 * 真 近 假 " 值 各 一 次 , 即 实现 了 条 件 覆 盖 。 


表 4.4 条 件 覆盖 测试 用 例 集 


序号 x y 预期 结果 | x<5 | y==5 |x<5|lly==5 备注 
1 2 1 3 T F T 
2 6 5 m F F F 


这 个 测试 用 例 集 满足 条 件 覆 盖 的 要 求 ,但 是 不 满足 判定 覆盖 的 要 求 。 因 此 ,就 有 了 下 面 
的 判定 /条 件 覆 盖 。 


4.4.4 ”判定 /条 件 覆盖 


通过 设计 足够 多 的 测试 用 例 ,使 得 程序 中 每 个 判定 包含 的 每 个 条 件 的 所 有 情况 ( 真 / 假 ) 
至 少 出 现 一 次 ,并 且 每 个 判定 本 身 的 判定 结果 ( 真 / 假 ) 也 至 少 出 现 一 次 。 这 种 设计 测试 用 例 
的 方法 称 为 判定 /条 件 覆 盖 。 
满足 判定 /条 件 覆 盖 的 测试 用 例 集 一 定 同时 满足 判定 覆盖 和 条 件 覆 盖 。 
根据 代码 ,可 以 设计 如 表 4. 5 所 示 的 测试 用 例 集 , 既 满足 判定 覆盖 又 满足 条 件 覆 盖 , 即 
实现 了 判定 /条 件 覆 盖 。 
表 4.5 判定 /条 件 覆 盖 测 试用 例 集 


序号 x y 预期 结果 | x<5 y==5 |x<5lly==5 备注 
1 2 1 3 F T 
2 6 5 11 F T T 
3 6 1 6 F F F 


4.4.5 组合 覆盖 


通过 设计 足够 多 的 测试 用 例 ,使 得 程序 中 每 个 判定 的 所 有 可 能 的 条 件 取 值 组 合 都 至 少 
出 现 一 次 。 这 种 设计 测试 用 例 的 方法 称 为 组 合 覆 盖 。 

满足 组 合 覆 盖 的 测试 用 例 集 一 定 满 足 判定 覆盖 条件 覆盖 和 判定 /条 件 覆 盖 。 

根据 代码 ,可 以 设计 如 表 4. 6 所 示 的 测试 用 例 集 ,使 得 程序 中 每 个 判定 的 所 有 可 能 的 条 
件 取 值 组 合 都 至 少 出 现 一 次 , 即 实现 了 组 合 覆 盖 。 


#46 组 合 覆盖 测试 用 例 集 


序号 x y 预期 结果 | x<5 y==5 |x<5lly==5 备注 
1 2 1 3 * E T 
2 6 5 11 F * * 
3 6 1 6 F F F 
4 1 5 6 T T T 
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4.4.6 Ежи 


正 是 由 于 程序 的 复杂 性 ,使 得 设计 测试 用 例 不 是 一 件 简单 的 事情 。 度 量程 序 的 复杂 
性 需要 用 到 图 论 的 知识 。 可 以 用 控制 流 图 描述 软件 模块 的 逻辑 结构 ,控制 流 图 是 简化 的 
程序 流程 图 。 程 序 的 控制 流程 可 以 用 图 形 符 号 表示 ,基本 控制 的 图 形 符号 如 图 4. 8 
所 示 。 


顺序 结构 IF 选 择 结构 While 循环 结构 “Until 循 环 结构 — ”Case 多 分 支 结 构 
图 4.8 基本 控制 的 图 形 符号 


控制 流 图 中 包括 两 种 图 形 符号 : 节点 和 控制 流 线 。 节 点 由 带 标号 的 圆圈 表示 ,可 代表 
一 个 或 多 个 语句 、 一 个 处 理 框 序列 和 一 个 条 件 判定 框 (假设 不 包含 复合 条 件 ,对 于 复合 条 件 ， 
可 将 其 分 解 为 多 个 单个 条 件 ,并 映射 成 控制 流 图 )。 控 制 流 线 由 带 箭头 的 弧 或 线 表 示 , 可 称 
为 边 。 它 代表 程序 中 的 控制 流 。 程 序 模块 通常 有 一 个 入 口 和 一 个 出 口 ,在 控制 流 图 中 相应 
地 有 一 个 入 口 节 点 和 出 口 节点 。 从 入 口 节点 经 过 一 些 节 点 和 边 到 达 出 口 节点 形成 程序 执行 
的 一 条 路 径 。 程 序 越 复杂 ,程序 中 可 能 的 执行 路 径 数 越 大 。 环 形 复杂 度 也 称 为 圈 复 杂 度 , 它 
是 一 种 为 程序 逻辑 复杂 度 提 供 定量 尺度 的 软件 度量 。 我 们 用 V(G) 表 示 环 形 复杂 度 , 将 
V(G) 定 义 为 : 

V(G) =e—n+2 

这 里 ,e 是 控制 流 图 的 边 数 ,n 是 控制 流 图 的 节点 数 。 还 可 以 用 如 下 两 个 方法 计算 环形 
MAE. 

V(G)= KR 

V(G) 王 判定 节点 数 十 1 

这 里 ,区 域 是 指 由 边 包 围 起 来 的 形状 ,图 中 没有 被 边 包 围 的 部 分 也 算 一 个 区 域 。 判 定 节 
点 是 有 多 个 边 以 它 作 为 起 点 的 节点 。 

设计 测试 用 例 时 ,要 覆盖 程序 的 所 有 路 径 通常 是 不 可 能 的 。 如 何 选 择 要 覆盖 的 路 径 ? 
人 们 引入 了 基本 路 径 集 合 的 概念 ,程序 流 图 的 基本 路 径 集合 是 由 独立 路 径 组 成 的 。 所 谓 独 
立 路 径 ,是 指 它 至 少 包含 一 条 在 其 他 独立 路 径 中 没 包含 的 边 。 程 序 流 图 中 的 任意 一 条 边 ,都 
至 少 在 一 条 独立 路 径 中 出 现 过 。 基 本 路 径 集合 与 独立 路 径 这 两 个 概念 密切 相关 。 基 本 路 径 
集合 有 两 个 特点 : 一 是 无 元 余 , 因 为 基本 路 径 集 合 是 由 独立 路 径 组 成 的 ,每 条 独立 路 径 至 少 
引入 了 一 条 新 的 边 ; 二 是 完备 性 ,基本 路 径 集合 覆盖 了 程序 流 图 中 所 有 的 边 。 程 序 流 图 的 
基本 路 径 集合 所 包含 的 路 径 数 , 称 为 独立 路 径 数 。 由 于 基本 路 径 集 合 不 是 唯一 的 ,所 以 独立 
路 径 数 也 不 是 唯一 的 。 但 是 独立 路 径 数 不 会 超过 环形 复杂 度 。 
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通过 设计 足够 多 的 测试 用 例 ,要 求 覆 盖 程 序 的 基本 路 径 集 合 中 所 有 可 能 的 路 径 。 这 种 
设计 测试 用 例 的 方法 称 为 基本 路 径 覆盖 。 

计算 基本 路 径 集合 ,可 以 使 用 Mccabe 基线 法 。 下 面 用 一 个 例子 来 说 明 Mccabe 基线 法 
计算 基本 路 径 集合 。 

例如 ,将 一 个 正 整数 分 解 为 质 因 数 的 Java 程序 如 下 : 

public class Number { 


public static String primeNumber( int n){ 
int k = 2; 


String rs=n+"="; 
while(k<=n){ 
if(k==n){ 

rs=rstn; 
break; 
}е1зе{ 
if(n%k==0){ 
rs=rstkt"*"; 
n=n/k; 
Jeise( 
к; 
) 
) 
} 
return rs; 
} 
} 


首先 根据 代码 画 出 程序 的 控制 流 图 ,如 图 4.9 所 示 。 
计算 环形 复杂 度 : 

V(G)=9—8+2=2+1=3 

找 出 一 组 独立 路 径 ( 基 本 路 径 集合 ): 


路 径 1,1-2-3-4 
路 径 2,1-2-3-5-6-8-2-3-4 G) (9 
路 径 3,1-2-3-5-7-8-2-3-4 O 
根据 基本 路 径 设计 测试 用 例 ,覆盖 基本 路 径 集合 中 的 所 有 
路 径 , 如 表 4.7 所 示 。 图 4.9 示例 程序 的 控制 流 图 
表 4.7 基本 路 径 覆 盖 测 试用 例 集 
序号 n 预期 结果 路 径 
1 2 2=2 1-2-3-4 
2 4 4=2X2 1-2-3-5-6-8-2-3-4 
3 3 3=3 1-2-3-5-7-8-2-3-4 
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任务 1. 参照 4.2 15. JH Eclipse #l JUnit 开发 简单 的 单元 测试 。 编 写 测试 报告 , 写 出 用 
Eclipse 和 JUnit 开发 单元 测试 的 一 般 步 又、 测试 代码 以 及 测试 结果 的 屏幕 截图 。 

任务 2. 参照 4. 3. 1 节 , 开 发 参数 化 单元 测试 。 编 写 测试 报告 , 写 出 用 Eclipse 和 JUnit 
开发 参数 化 单元 测试 的 要 点 ,测试 代码 以 及 测试 结果 的 屏幕 截图 。 

任务 3: 参照 4. 3. 2 节 , 用 Mockito 进行 隔离 测试 。 编写 测试 报告 , 写 出 用 Eclipse、 
JUnit 和 Mockito 开发 隔离 测试 的 要 点 ,测试 代码 以 及 测试 结果 的 屏幕 截图 。 
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本 章 主 要 内 容 

集成 测试 简介 

集成 测试 工具 

Jenkins 演练 

能 力 拓展 : 在 Docker 中 运行 Jenkins 

下 面 看 看 开源 项 目 OpenOLAT 是 如 何 组 织 软 件 开发 过 程 的 。 以 OpenOLAT 12.4 为 
例 ,OpenOLAT 并 没有 停止 脚步 。 仍 然 在 不 断 地 发 现 缺 陷 、 修 改 缺 陷 ,这 并 不 表明 
OpenOLAT 是 不 成 熟 的 。 为 什么 ”我们 知道 ,软件 测试 有 一 条 原则 一 一 “软件 测试 是 为 了 
找到 软件 的 缺陷 ,而 不 是 证 明 软件 没有 缺陷 ”。 当 发 现 缺 陷 , 对 缺陷 进行 修改 后 ,需要 进行 回 
归 测 试 ,不 仅 需要 测试 修改 后 的 单元 ,还 需要 测试 与 修改 后 的 单元 相关 的 单元 。 
OpenOLA T 是 如 何 管理 软件 开发 过 程 的 呢 ? 它 使 用 了 集成 测试 工具 Hudson, 把 单元 测试 
(JUnit) 、 缺 陷 跟踪 (JIRA) 整 合 起 来 。 在 http://hg. openolat. org/openolat124/ 可 以 看 到 
OpenOLAT 的 代码 变更 情况 。 

本 章 首先 介绍 集成 测试 的 基本 知识 ,然后 介绍 持续 集成 测试 工具 Jenkins 的 使 用 方法 。 


6.1 什么 是 集成 测试 


在 单元 测试 以 后 ,需要 将 经 过 单元 测试 的 单元 集成 在 一 起 ,组 成 软件 的 部 件 或 子 系统 ， 
直至 得 到 整个 系统 。 在 单元 测试 时 ,我 们 关注 更 多 的 是 单元 内 部 的 组 成 。 由 单元 组 成 的 部 
件 或 子 系统 还 必须 经 过 测试 ,以 验证 不 同 的 单元 集成 在 一 起 能 够 相互 配合 共同 实现 概要 设 
计时 设 定 的 目标 。 


5.1.1 集成 测试 简介 


1. 集成 测试 概念 


V 模型 中 的 第 二 个 测试 级 别 是 集成 测试 。 集 成 测试 关注 的 是 单元 与 单元 之 间 是 否 能 
协同 工作 。 集 成 测试 与 单元 测试 密切 相关 ,单元 测试 是 集成 测试 的 前 提 , 在 做 单元 测试 时 也 
可 以 做 某 种 形式 的 集成 测试 一 一 模拟 集成 测试 。 
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集成 测试 依据 : 
° 软件 和 系统 概要 设计 文档 。 
° 工作 流 。 
。 用 例 。 
典型 集成 测试 对 象 : 
* 组 件 与 组 件 是 否 能 协同 工作 形成 子 系统 。 
° 全 局 数据 结构 。 
* 组 件 之 间 的 数据 交换 。 
。 子 系统 内 组 件 与 组 件 的 接口 . 子 系统 与 外 界 的 接口 。 
。 系统 配置 和 配置 数据 。 
集成 测试 主要 是 对 组 件 之 间 的 接口 进行 测试 ,以 及 测试 一 个 系统 内 不 同 部 分 的 相互 作 
用 ,比如 操作 系统 、 文 件 系 统 \ 硬 件 或 系统 之 间 的 接口 。 
对 于 集成 测试 ,可 以 应 用 多 种 集成 级 别 ,也 可 以 根据 不 同 的 测试 对 象 规模 采用 不 同 的 级 
别 , 例 如 ,以 下 两 种 集成 测试 级 别 : 
。 组 件 集成 测试 ,对 不 同 的 软件 组 件 之 间 的 相互 作用 进行 测试 ,一 般 在 组 件 测试 之 后 
进行 。 
* 系统 集成 测试 ,对 不 同系 统 或 软 硬 件 之 间 的 相互 作用 进行 测试 ,一 般 在 系统 测试 之 
后 进行 。 在 这 种 情况 下 ,开发 组 织 / 团 体 通 常 可 能 只 控制 自己 这 边 的 接口 ,这 就 可 能 
存在 风险 。 按 照 工 作 流 执行 的 业务 操作 可 能 包含 一 系列 系统 ,因此 跨 平台 的 问题 可 
集成 的 级 别 越 高 ,就 越 难 在 某 一 特定 的 组 件 或 系统 中 定位 缺陷 ,测试 的 风险 就 越 大 ,将 
会 花费 更 多 的 额外 时 间 去 发 现 和 修复 这 些 缺 陷 。 


2. 集成 测试 策略 


随 着 集成 测试 的 不 断 实践 ,人 们 对 集成 测试 的 认识 也 在 不 断 深化 。 因 此 ,人 们 提出 了 各 
种 集成 测试 测 略 。 历 史 总 是 这 样 ,我 们 在 前 人 的 基础 上 ,发 现 不 足 , 进 行 改进 并 有 了 所 创新 。 
集成 测试 策略 的 发 展 过 程 也 不 例外 。 

1) 大 爆炸 集成 测试 

最 容易 想到 的 一 种 集成 测试 策略 是 大 爆炸 集成 测试 。 大 爆炸 集成 测试 也 称 为 一 次 性 组 
装 或 整体 拼装 测试 ,是 一 种 非 增 量 式 集成 测试 测 略 。 这 种 集成 测试 策略 的 做 法 就 是 把 所 有 
通过 单元 测试 的 模块 一 次 性 集成 到 一 起 进行 测试 ,是 软件 测试 早期 人 们 普遍 采用 的 一 种 集 
成 测试 策略 , 那 时 软件 开发 通常 是 按照 编码 ,单元 测试 、 集 成 测试 的 顺序 进行 的 ,也 就 是 说 ， 
是 在 所 有 的 代码 写 完 后 ,所 有 的 单元 都 经 过 了 单元 测试 才 进 行 集成 测试 。 随 着 新 的 软件 开 
发 方式 的 出 现 ,例如 ,测试 驱动 开发 的 兴起 ,大 爆炸 集成 测试 不 能 满足 新 的 软件 开发 方式 的 
需要 ,就 出 现 了 渐进 式 集成 测试 策略 。 大 爆炸 集成 测试 策略 的 优点 是 : 简单 、 易 操作 ; 可 以 
并 行 开 展 集成 测试 工作 。 大 爆炸 集成 测试 策略 的 缺点 是 : 软件 缺陷 定位 困难 ; 成 功 进行 有 
效 集成 测试 的 可 能 性 较 小 。 

大 爆炸 集成 测试 如 图 5. 1 所 示 。 
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图 5.1 大 爆炸 集成 测试 示意 图 


2) 自 项 向 下 集成 测试 

自 项 向 下 集成 测试 是 一 种 渐进 式 集成 测试 策略 ,从 系统 层次 结构 图 的 最 顶层 模块 开始 
按照 层次 结构 图 , 逐 层 向 下 进行 组 装 和 集成 测试 。 自 顶 向 下 集成 测试 是 按照 系统 层次 结构 
图 ,以 主 程序 模块 为 中 心 , 从 顶层 控制 ( 主 控 模 块 ) 开 始 , 自 上 而 下 按照 深度 优先 或 者 广度 优 
先 策略 ,对 各 个 模块 一 边 组 装 一 边 进 行 测试 。 采用 同 软件 设计 顺序 一 样 的 思路 对 被 测 系统 
进行 测试 ,来 验证 系统 的 功能 性 和 稳定 性 。 自 顶 向 下 集成 测试 较 好 满足 了 测试 驱动 开发 的 
需要 。 自 顶 向 下 集成 测试 策略 的 思想 提出 的 时 间 比 较 早 ,但 是 ,在 软件 测试 的 早期 ,人 们 是 
在 所 有 代码 编写 完成 之 后 才 进行 自 顶 向 下 集成 测试 的 。 尽 管 所 有 的 代码 模块 都 已 经 编写 完 
成 ,但 是 我 们 先 测试 主 控 模 块 ,为 了 隔离 缺陷 ,方便 找到 产生 缺陷 的 模块 ,我 们 用 所 谓 的 桩 模 
块 代替 实际 的 模块 。 然 后 一 点 一 点 地 加 入 实际 模块 ,进行 集成 测试 。 在 测试 驱动 开发 时 ,可 
以 在 还 没有 编写 代码 时 就 进行 自 顶 向 下 集成 测试 ,以 便 验证 软件 设计 的 正确 性 。 自 项 向 下 
集成 测试 策略 的 优点 是 : 采用 测试 驱动 开发 的 自 顶 向 下 的 集成 测试 ,可 以 较 早 验证 软件 设 
计 的 正确 性 ; 支持 缺陷 隔离 ,容易 定位 软件 缺陷 ; 提高 了 进行 有 效 集成 测试 的 可 能 性 。 自 
顶 向 下 集成 测试 策略 的 缺点 是 : 桩 模块 的 开发 和 维护 的 成 本 高 ; 底层 模块 的 缺陷 发 现 得 太 
晚 有 可 能 影响 上 层 模块 的 频繁 修改 ,因为 缺陷 往往 是 从 底层 向 上 层 扩散 的 。 

自 项 向 下 集成 测试 如 图 5. 2 Bran o 

3) 自 底 向 上 集成 测试 

自 底 向 上 集成 测试 也 是 一 种 渐进 式 集成 测试 策略 。 与 自 顶 向 下 集成 测试 策略 不 同 的 
是 , 自 底 向 上 集成 测试 从 系统 层次 结构 图 的 最 底层 模块 开始 ,按照 层次 结构 图 , 逐 层 向 上 进 
行 组 装 和 集成 测试 ,不 必 等 到 所 有 的 单元 都 经 过 了 单元 测试 以 后 才 进 行 集成 测试 ,而 是 把 最 
密切 相关 的 单元 集成 为 一 个 规模 更 大 的 部 件 ,进行 集成 测试 ,再 把 这 些 部 件 集成 到 上 一 层 更 
大 的 部 件 , 进 行 集成 测试 ,直到 集成 为 整个 系统 。 简 单 地 说 ,就 是 一 点 一 点 地 集成 。 自 底 向 
上 集成 测试 策略 符合 软件 测试 的 一 条 原则 一 一 “软件 测试 活动 应 当 尽早 开始 ”。 在 被 测 模块 
还 没有 编写 完成 时 ,就 可 以 对 被 测 模块 进行 测试 ,编写 一 个 驱动 程序 ,测试 组 成 它 的 各 模块 
的 是 否 能 够 协同 达到 概要 设计 目标 。 自 底 向 上 集成 测试 策略 的 优点 是 : 较 早 验证 底层 模 
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图 5.2 自 项 向 下 集成 测试 示意 图 


块 ,防止 缺陷 向 上 扩散 ; 可 以 并 行进 行 集成 测试 ; 支持 缺陷 隔离 ,容易 定位 软件 缺陷 ; 提高 
了 进行 有 效 集成 测试 的 可 能 性 ; 驱动 模块 的 开发 和 维护 成 本 比 桩 模块 的 开发 和 维护 的 成 本 
低 。 自 底 向 上 集成 测试 策略 的 缺点 是 : 需要 开发 维护 驱动 模块 ; 对 高 层 的 验证 较 晚 ,软件 
设计 中 的 错误 不 能 被 及 时 发 现 。 

自 底 向 上 集成 测试 如 图 5. З 所 示 。 
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图 5.3 自 底 向 上 集成 测试 示意 图 
4) 三 明治 集成 测试 


三 明治 集成 测试 是 一 种 混合 渐进 式 集成 测试 策略 , 它 结合 了 自 顶 向 下 和 自 底 向 上 两 种 
集成 方法 ,以 中 间 一 层 作 为 目标 层 , 目 标 层 以 上 采用 自 顶 向 下 集成 ,目标 层 以 下 采用 自 底 向 
上 集成 。 三 明治 集成 测试 策略 的 优点 是 具备 了 自 顶 向 下 集成 测试 策略 的 优点 和 自 底 向 上 集 
成 测试 策略 的 优点 。 三 明治 集成 测试 策略 的 缺点 是 自 顶 向 下 集成 测试 策略 的 缺点 或 自 底 向 
上 集成 测试 策略 的 缺点 仍然 不 同 程度 地 存在 。 因 此 ,三 明治 集成 测试 策略 是 在 自 项 向 下 集 
成 测试 策略 或 自 底 向 上 集成 测试 策略 的 优点 和 缺点 中 进行 权衡 。 

三 明治 集成 测试 如 图 5.4 所 示 。 

5) 持续 集成 测试 

软件 开发 不 是 一 路 而 就 的 ,往往 经 历 编码 测试、 修改 .测试 …… 因 此 ,业界 通常 采用 持 


120, 软件 测试 实战 教程 
NA 


图 5.4 三 明治 集成 测试 示意 图 


续集 成 测试 策略 。 软 件 开发 中 各 个 模块 不 是 同时 完成 的 ,根据 进度 将 完成 的 模块 尽 可 能 早 
地 进行 集成 有 助 于 尽早 发 现 Bug, 避 免 集 成 中 Bug 大 量 集中 涌现 。 持 续集 成 测试 策略 是 与 
软件 编码 过 程 联系 最 紧密 的 一 种 集成 测试 策略 ,简单 地 说 ,就 是 边 编码 、 边 测试 、 边 集成 , 反 
复 进行 集成 测试 。 持 续集 成 测试 策略 除了 需要 编写 桩 模块 或 驱动 模块 以 外 ,还 需要 自动 化 
测试 和 集成 工具 的 支持 。 一 般 地 ,编码 人 员 每 天 下 班 前 向 测试 环境 提交 完成 的 代码 ,测试 环 
境 自动 完成 单元 测试 和 集成 测试 ,在 第 二 天 上 班 前 将 测试 报告 发 送 到 编码 人 员 或 相关 人 员 ， 
编码 人 员 修 改 代码 错误 ,再 次 向 测试 环境 提交 修改 后 的 代码 ,测试 环境 再 次 自动 进行 单元 测 
试 和 集成 测试 。 当 然 ,持续 集成 测试 的 间隔 可 以 根据 实际 情况 设 定 ,一 般 是 每 天 或 每 周 。 间 
隔 太 短 没有 必要 ,间隔 太 长 达 不 到 持续 集成 测试 的 效果 。 
持续 集成 测试 如 图 5.5 所 示 。 
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图 5.5 持续 集成 测试 示意 图 


3. 集成 测试 的 执行 


可 以 采用 白 盒 测试 设计 技术 和 黑 盒 测试 设计 技术 进行 测试 用 例 的 设计 。 我 们 在 第 4 章 
讲解 了 白 盒 测试 设计 技术 ,第 6 章 将 介绍 黑 盒 测 试 设 计 技 术 。 

集成 测试 可 以 采用 手工 测试 的 方法 ,但 一 般 是 采用 自动 化 测试 的 方法 ,可 以 采用 单元 测 
试 框架 (例如 ,JUnit) 和 Mock 测试 框架 (例如 ,EasyMock 或 JMock) 编 写 测试 程序 ,通过 构 
建 工 具 ( 例 如 ,Maven) 和 集成 工具 (例如 ,Jenkins) 自 动 完 成 集成 测试 。 
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5.1.2 集成 测试 工具 


“ 兵 马 未 动 ,粮草 先行 .没有 集成 测试 工具 的 支持 是 不 可 能 进行 持续 集成 的 。 下 面 介绍 
几 种 常见 的 持续 集成 工具 。 


1. Jenkins 


Jenkins 是 一 个 开源 软件 项 目 , 是 基于 Java 开发 的 一 种 持续 集成 /持续 发 布 工具 ,用 于 
监控 持续 重复 的 工作 , 旨 在 提供 一 个 开放 易 用 的 软件 平台 ,使 软件 的 持续 集成 成 为 可 能 。 持 
续集 成 是 一 种 软件 开发 实践 , 即 团队 开发 成 员 经 常 集成 他 们 的 工作 ,通过 每 个 成 员 每 天 至 少 
集成 一 次 ,也 就 意味 着 每 天 可 能 会 发 生 多 次 集成 。 每 次 集成 都 通过 自动 化 的 构建 (包括 编 
译 、 发 布 . 自 动 化 测试 ) 来 验证 ,从 而 尽早 地 发 现 集成 错误 。 

Jenkins 有 如 下 功能 : 

。 定时 拉 取 代码 并 编译 。 

° 静态 代码 分 析 。 

。 定时 打包 发 布 测 试 版 。 

* 自 定义 额外 的 操作 ,如 运行 单元 测试 等 。 

出错 提醒 。 

详 见 官 方 网 址 https://jenkins. io/。 


2. Hudson 


Eclipse HudSon 是 一 个 用 Java 编写 的 持续 集成 (CD 工具 , 它 运行 在 Servlet 容器 中 , 例 
如 Apache Tomcat 或 GlassFish 应 用 服务 器 。 它 支持 SCM (Software Configuration 
Management, 软 件 配 置 管 理 ) 工 具 , 包 括 CVS、Subversion、Git 和 Clearcase, 可 以 执行 基于 
Apache Ant 和 Apache Maven 的 项 目 , 以 及 任意 的 shell 脚本 和 Windows 批 处 理 命令 。 
Eclipse Hudson 受 开源 许可 协议 Eclipse Public License 1. 0 保护 。Eclipse HudSon 是 
Hudson 的 核心 。Hudson 有 许多 插件 ,有 些 插件 是 由 第 三 方 提供 的 。 

详 见 官方 网 址 http://www. eclipse. org/hudson/. 


3. Travis CI 


Travis CI 是 目前 新 兴 的 开源 持续 集成 构建 项 目 , 它 与 Jenkins 的 区 别 在 于 它 是 在 线 托 
管 的 CI 服务 ,而 Jenkins 是 需要 安装 部 署 的 。 目 前 大 多 数 的 Github 项 目 都 已 经 移入 到 
Travis CI 的 构建 队列 中 ,据说 Travis CI 每 天 运行 超过 4000 次 完整 构建 。 

详 见 官方 网 址 https://www. travis-ci. org/。 


4. GitLab 


GitLab 是 一 个 覆盖 DevOps 生命 周期 各 个 阶段 的 应 用 程序 ,使 得 组 织 不 受 工具 链 的 约 
东 , 能 够 并 发 开展 DevOps 的 工作 。GitLab 提供 了 超 强 的 可 视 性 ,更 高 的 效率 和 全 面 的 治 
理 。 使 用 GitLab 可 以 使 得 软件 生命 周期 大 大 缩短 ,从 根本 上 提高 了 软件 交付 的 速度 。 

详 见 官方 网 址 https://about. gitlab. com/, 
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5. buddybuild 


buddybuild 将 持续 集成 、 持 续 交 付 和 选 代 反 馈 解决 方案 结合 到 一 个 单一 无 颖 的 平台 
中 。 不 需要 再 拼凑 不 同 的 系统 来 满足 移动 开发 需求 。 通 过 buddybuild, 你 只 需 关注 最 重要 
的 事情 一 一 创建 精美 的 应 用 程序 。 
buddybuild 与 其 他 解决 方案 的 关系 如 图 5. 6 所 示 。 


С) Ө ty buddybuild 


GITHUB  BITBUCKET GITLAB 


+ 
所 有 其 他 Git 源 代码 控制 仓库 


图 5.6 buddybuild 与 其 他 解决 方案 的 关系 
详 见 官方 网 址 https://www. buddybuild. com/. 


6.2 Jenkins 起 步 


本 节 介 绍 在 Windows 环境 下 Jenkins 的 安装 .配置 。 
5.2.1 Jenkins 安装 


Jenkins 是 一 个 开源 软件 项 目 ,是 基于 Java 开发 的 一 种 持续 集成 工具 ,用 于 监控 持续 重 
复 的 工作 , 旨 在 提供 一 个 开放 易 用 的 软件 平台 ,使 软件 的 持续 集成 成 为 可 能 。 

首先 ,从 Jenkins 官方 网 站 https: //jenkins. io/ 下 载 最 新 的 war 包 。 虽 然 Jenkins 提供 
T Windows, Linux, OS X 等 各 种 安装 程序 ,但 是 ,最 简单 的 方法 是 使 用 war £2, Jenkins 把 
Java 包 做 得 如 此 好 用 ,只 需要 运行 命令 : 


java - jar Jenkins. war 


Jenkins 就 启动 成 功 了 ! 它 的 war 包 自 带 Jetty 服务 器 , 剩 下 的 工作 全 部 在 浏览 器 中 进 
行 。 值 得 注意 的 是 ,Jenkins 将 被 安装 到 С. N Users \ Іепоуо\. jenkins (lenovo 是 你 登录 
Windows 7 的 账号 )。 如 果 需 要 指定 安装 目录 .请 先 设 置 Windows 环境 变量 JENKINS_ 
HOME, ,再 运行 命令 。 这 时 ,Jenkins 将 被 安装 到 $JENKINS_HOME。 

第 一 次 启动 Jenkins 时 ,出 于 安全 考虑 ,Jenkins 会 自动 生成 一 个 随机 的 安装 口令 。 注 
意 控制 台 输 出 的 口令 ,复制 下 来 ,然后 在 浏览 器 地 址 栏 输入 : 

http: //1oca1lhost:8080/ 


出 现 如 图 5. 7 所 示 的 屏幕 画面 。 
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解锁 jenkins 

为 了 确保 管理 员 安全 地 安 独 enkins ,密码 已 写 入 到 日 志 中 (PBB? ) 该 文件 在 
服务 器 上 : 

ee 

请 从 本 地 复制 密码 并 粘贴 到 下 面 . 

ERARA 


图 5.7 输入 管理 员 密码 
输入 管理 员 密码 , 单 击 * 继 续 ” 按 钮 ,出 现 如 图 5. 8 所 示 的 屏幕 画面 。 


新 手 入 门 


自 定义 jenkins 


插件 通过 附加 特性 来 扩展 jenkins 以 满足 不 同 的 需求 。 


安装 推荐 的 插件 选择 插件 来 安装 


eee ee 选择 并 安装 最 适合 的 插件 。 


图 5.8 安装 Jenkins 插件 


根据 情况 , 单 击 “ 安 装 推荐 的 插件 ”或 “选择 插件 来 安装 ”按钮 ,出 现 如 图 5. 9 所 示 的 屏幕 
画面 。 

输入 用 户 名 等 信息 ,创建 第 一 个 管理 员 账 户 , 单 击 * 保 存 并 完成 ?按钮 。Jenkins 安装 完 
成 ,如 图 5.10 所 示 o 

单 击 “ 开 始 使 用 jenkins” 按 钮 ,出 现 如 图 5. 11 所 示 的 屏幕 画面 。 

单 击 “ 创 建 一 个 新 任务 "链接 ,输入 任务 名 称 ,选择 任务 类 型 ,例如 ,构建 一 个 自由 风格 的 
软件 项 目 , 单 击 “ 确 定 ” 按 钮 ,如 图 5. 12 所 示 。 

Jenkins 安装 完成 后 ,仍然 是 用 命令 java-jar Jenkins. war 启动 Jenkins。 
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新 手 入 门 
创建 第 一 个 管理 员 用 户 
密码 
RES 
全 名 
电子 部 件 地 址 - 

Jenkin: 使 用 admin 账 户 继续 Gs 

图 5.9 创建 第 一 个 管理 员 账 户 
新 手 入 门 


Jenkins 已 就 绪 ! 


jenkins 安 装 已 完成 。 


开始 使 用 jenkins 


图 5.10 Jenkins 安装 就 绪 
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1 = 
@ Dashboard Lenkins} ЧО E тал Ж Ж Е 


€ С |  localhost8080 


& 本 欢迎 使 用 Jenkins! 
Б =. 


Ф. Credentiais 
Bn mitos 


构建 队列 一 
队列 中 没有 构建 任务 


ER MUM: 2019-30 008379280 BESTAPI Jenkins ver 21072 


图 5.11 Jenkins 首页 


анне em em 一 


er © | © localhost:8080/newJob 


构建 一 个 白 由 风格 的 软件 项 目 
这 是 Jenkuns 的 主要 功能 Jenlons 交 全 结合 任何 SCM 和 任何 构建 系统 来 构建 他 的 项 目 , BEATTIE 


aks 
基地 坦 织 一 个 可 以 长 期 运行 在 多 个 节点 上 的 任务 适用 于 构建 流水 线 (更 加 正式 地 应 当 称 为 工作 流 】, 增加 或 者 组 织 
难以 采用 自由 风格 的 任务 类 型 。 


构建 一 个 多 配置 项 目 
SHTSEERE SUSTUIRRGL елни 等 等 


GitHub Organization 
Scans a GitHub organization (or user account) for all repositories matching some defined markers, 


| 


a set of Pipeine projects according to detected branches m one SCM repository 
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5.2.2 插件 安装 


Jenkins 有 大 量 的 插件 ,根据 需要 随时 可 以 选择 
安装 。 登 录 Jenkins 后 ,Jenkins 的 首页 左 侧 部 分 如 
图 5.13 所 示 。 

单 击 “ 系 统管 理 ” 链 接 , 将 出 现 系统 管理 页 面 ,如 
图 5. 14 所 示 。 

单 击 “管理 插件 ”链接 ,将 出 现 管理 插件 页 面 , 如 
图 5.15 所 示 。 

单 击 “ 高 级 "标签 页 可 以 设置 升级 站 点 。 单 击 “ 可 
选 插件 ?标签 页 将 显示 可 选 插件 列表 。 如 果 不 能 显示 
可 选 插件 列表 ,可 以 打开 一 个 新 的 浏览 器 页 签 ,输入 网 
Hk http://localhost:8080/pluginManager/advanced。 

打开 后 界面 最 下 方 有 个 “升级 站 点 ”选项 ,把 其 中 的 
链接 改 成 http 协议 就 好 了 , 即 把 升级 站 点 修改 为 
http; / / updates. jenkins. io/ update-center. json。 然 后 在 服 
务 列表 中 关闭 Jenkins, 再 启动 ,这 样 就 能 正常 联网 了 。 


5 Jenkins 新 版 本 (2.106) 可 点 击 download (变更 说 明 ) 下 载 。 


系统 设置 
全 局 设置 & 路 径 


N) estera 

Jenkins 安 全 ， 定 义 谁 可 以 访问 或 使 用 系统 
^, тта 

工具 配置 ， 包 括 它们 的 位 置 和 自动 安装 符 


FM enem 
Њи ns: 


@ Jenkins 


图 5.15 管理 插件 页 面 


Jenkins 
€ so 

& 5^ 

= HS 
dix 
& vy views 
ll New view 


构建 队列 一 
队列 中 没有 构建 任务 

Wi TTR - 

ШЕ 


2 空间 


图 5. 13 Jenkins 首页 左 部 


或 自动 升级 版 本 


内 存 中 所 有 的 设置 信息 并 从 配置 文件 中 重新 读 取 仅 用 于 当 您 手动 
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由 于 网 络 问 题 , 如果 不 能 安装 插件 ,还 可 以 变更 升级 站 点 ,可 以 在 http://mirrors. 
jenkins-ci. org/status. html 网 址 查询 可 用 的 升级 站 点 。 

例如 ,可 以 安装 插件 Pipeline: Multibranch with defaults 和 插件 BlueOcean。 后 面 的 示 
例 将 会 用 到 这 两 个 插件 。 


5.2.3 Jenkins 配置 


在 Jenkins 能 够 自动 完成 构建 .单元 测试 .集成 测试 .部 署 工作 之 前 ,Jenkins 管理 员 
要 对 Jenkins 进行 一 些 配置 。Jenkins 管理 员 可 以 在 Jenkins 的 系统 管理 功能 模块 完成 这 
配置 工作 。 下 面 以 全 局 工具 配置 为 例 , 讲 解 配置 方法 。 

单 击 “系统 管理 ”全 局 工具 配置 ”链接 ,如 图 5. 16 和 图 5.17 所 示 。 


些 


I Jenkins - w 
jenis певг®® 
«таз» 

ae 管理 Jenkins 

FIL 

BOE 

Q, зв» 

` "i TORRE 

эш мазета 

G км > I3 全 同安 全 配置 

& Aum E. епот? | @ y Saj qm PUR 
@ Open Bue Ocean. Configure Credentials. 

Ф. сезен Contgure me crecentas proviaers ana types 


== XC 
` i гє отка ose mad 


图 5.16 系统 管理 页 面 


JDK 安 装 


gus JOK 
系统 下 JDK SSE 
Git 
Git installations pr 
Gradle 
me энш Gradle 
系统 下 Gradle 安装 列表 
Mercurial 
Mercurial 安装 а 
系统 下 Mercural SAFIR 
Ant 
Ant 安装 ‘StS Ant 
系统 下 Ant 安装 列表 
Maven 
Maven 安装 一 
系统 下 Maven 安装 列表 
Docker 


EZ ^ 


图 5.17 全 局 工具 配置 页 面 
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单 击 “ 新 增 JDK” 按 钮 ,配置 Java 开发 工具 JDK, 如 图 5. 18 所 示 。 
JOK 


юке JOK 
T E 


JAVA_HOME Program Files\avalidkt 8 0_121 


© 自动 安装 © 
шок 
系统 下 JDK ж 


图 5.18 配置 Java 开发 工具 JDK 


单 击 Add Git 按钮 ,配置 源 代码 版 本 管理 工具 Git, 如 图 5. 19 所 示 。 


= © 
Patho Gt existe program Fen Geen ee — — ° 


Git 
Git instaltatons 


Set path to gt executable. This can be just "gi or complete path. 
(trom eins Ga chent ошоп) 
О azer e 
AddG > 


5.19 配置 源 代 码 版 本 管理 工具 Git 


单 击 “ 新 增 Maven” 按 钮 ,配置 构建 工具 Maven, 如 图 5. 20 所 示 。 


Maven 
Maven 安装 Maven 
= | 
| 
© Required 
шин Сш». 
© azea e 
Mig Maven. 
Wi FMaven amm 


5.20 配置 构建 工具 Maven 
需要 的 一 些 配置 完成 后 ,就 可 以 创建 任务 了 。 


5.2.4 创建 新 任务 
创建 任务 是 Jenkins 中 主要 的 工作 ,Jenkins 管理 员 通 过 创建 任务 ,将 构建 .单元 测试 、 
集成 测试 .部 署 等 工作 交 给 Jenkins 自动 完成 。 
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Jenkins 首页 左 侧 部 分 如 图 5. 21 所 示 


单 击 “ 新 建 "链接 ,输入 任务 名 称 , 选 择 任务 类 型 ， 


例如 ,构建 一 个 自由 风格 的 软件 项 目 ,如 图 5.22 pen 
所 示 。 Sane 
d scum 
单 击 “确定 ?按钮 ,显示 任务 配置 页 面 ,如 图 5. 23 & ves 
BUR, Mj New View 
任务 配置 页 面 有 General, Ui 3 F JW , FJ E foh Ж on Е 
器 \ 构 建 环境 、 构 建 、 构 建 后 操作 六 个 标签 。 下 一 节 将 
sunu E 
通过 示例 讲解 如 何 配 置 Jenkins 任务 。 ' зя 


配置 完成 后 , 单 击 * 保 存 ” 按 钮 。 
图 5.21 Jenkins 首页 左 侧 部 分 


PRES п 


€ Q Ф localhost 
Ф Jenkins 


мама 


f яана сом 
€ > C [O localhost 


45.23 任务 配置 页 面 
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6.3 Jenkins 操作 演练 
2 


本 节 讲 解 如 何 使 用 Jenkins 和 Maven 构建 Java 应 用 。 

示例 Java 应 用 输入 字符 串 “Hello World” 的 简单 应 用 ,项 目 中 还 包含 单元 测试 ,并 将 单 
元 测试 结果 保存 到 JUnit XML 报告 。 

以 下 的 讲解 以 Windows 环境 为 例 。 


5.3.1 准备 


为 了 获取 Github 上 的 示例 “Hello World"Java 应 用 ,首先 必须 fork 示例 库 到 你 自己 的 
Github 账号 下 ,然后 clone 这 个 分 支 到 本 地 计算 机 上 。 

* 用 自己 的 账号 登录 Github (可 以 在 Github. http: / /github. com 免费 注册 一 个 账号 ) 。 

* 搜索 jenkins-docs/simple-java-maven-app, $Ë Jš fork 到 自己 的 账号 下 。 


5.3.2 在 Jenkins 中 创建 任务 


本 节 将 创建 两 个 Jenkins 任务 : 一 个 流水 线 任务 simple-java-maven-app, 一 个 自由 风格 
的 软件 项 目 任务 report。 任 务 report 在 任务 simple-java-maven-app 构建 完成 后 自动 执行 。 

Jenkins Pipeline 是 一 组 Jenkins 插件 ,在 Jenkins 中 实现 了 版 本 控制 、 持 续 构 建 ( 编 译 、 
测试 .部 署 ) Ae ti TES. Pipeline 使 用 Pipeline 特定 领域 语言 (Domain-Specific Language, 
DSL) 实 现 工作 流 自动 化 。DSL 代码 写 在 文本 文件 Jenkins 中 ,并 且 提 交 到 开发 项 目的 代码 
控制 库 中 。 虽 然 Jenkins 仍然 支持 自由 风格 的 由 一 组 基本 任务 完成 发 布 工作 ,但 是 ,使 用 
Pipeline 是 自动 发 布 的 最 佳 实践 。Jenkins Pipline 的 工作 流 如 图 5. 24 所 示 。 


xz 


RAN 
H BEES H 
4 端 到 端 测试 | H 


图 5.24 Jenkins Pipline 的 工作 流 


(Docker) 


qii) : = 


EEJ 


COD 用 管理 员 账 号 登录 Jenkins, 如 图 5. 25 所 示 。 
(2) 单 击 Credentials System 链接 ,显示 账号 凭证 设置 页 面 , 如 图 5. 26 所 示 o 
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Jenkins 

e ка 

& a 欢迎 使 用 Jenkins! 
= asme 

ann | Free- 人 HS 

& My views 


© Open Blue Ocean 


А. Credentials. 


Ва New view 


构建 队列 - 
队列 中 没有 构建 任务 

шла - 

1 $58 

2 SA 


图 5.25 Jenkins 的 首页 


@ Jenkins 


集成 测试 


Jenkins Credentials. System 


тин» 
& те 4 System 
"FI 5e 


Ф maxx 


an мезета di \ requvements matching. 
& nnum 
(qp) Open Blue Ocean 
À Credentiais 
€ 


图 5.26 账号 凭证 设置 页 面 


(3) 单 击 Global credentials (unrestricted) 旁边 的 下 三 角 按 钮 ,再 单 击 Add credentials 


链接 ,显示 增加 账号 凭证 页 面 ,如 图 5.27 所 示 。 
(4) 输入 你 的 Github 的 账号 密码 , 单 击 OK 按钮 。 


(5) 单 击 “ 创 建 一 个 新 任务 "链接 或 者 单 击 左边 的 “新 建 " 链 接 , 输 入 任务 名 称 为 simple- 


java-maven-app, 选 择 任务 类 型 为 “流水 线 ”, 如 图 5. 28 所 示 。 


(6) 单 击 “ 确 定 ” 按 钮 。 在 General 标签 页 ,选中 Github project. #ў A Project Url. 如 


图 5. 29 所 示 。 
(7) 选中 Poll SCM 构建 触发 器 ,输入 日 程 表 , 如 图 5. 30 所 示 。 


Credereas that should be avaiable erespectre of doman spec ic abon to 
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会 Back io crecennat comans 


@— Аса Credentisis 


| 


图 5.27 增加 账号 凭证 页 面 


шш гапамон 
епот eam A дна асс клала вите n MEURTRIE 


Rose зев ө ню. WHORE ( тотовеве»тея ) . MERCER ARNE 


> arsena 
|} ат+зенеп ososuqma manene es 
e Bitbucket Team/Project 


Ө) scons вака оа Team (or Babuchat Servet Proyect) er al repordones matching some deled markers 


PSLUREUAMODH. HCTMS, ACRES. MIA TRONSEOR . REFLUAS NIRSO 
RRMA MEG ROT, 


A Aenantratinn 


图 5.28 创建 一 个 流水 线 任务 


Jenkins › simple-java-maven-app 


General Lor d mas 


жщ 


项 目 名 称 Smple -java-maven-app 


mit 


27) BS 
В Do not allow concurrent builds 


© Do noLaligy the pipeline to resume if the master restarts. 
Ë GitHub project 
Project url Jigithub com/kehuagao/simple-java-maven-app git! 


pvemde 
保存 am 


E 5.29 输入 项 目 源 代码 在 Github 仓库 的 地 址 
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© Buld after other projects are buit 
© Buld periodically 


ee 
= 


Would last have run at 201888671228. REE FS028329596 CST. would next run at 201886F22E ШЕЕ 下 于 028134 
59% CST. 


Ignore postcomma hooks O 


о ista 


EA ^ - 


图 5.30 设置 构建 触发 器 


(8) 在 流水线? 标签 页 ,输入 Repostory URL 等 ,其 中 Credentials 选择 第 (3) 步 增加 的 
账号 凭证 ,如 图 5. 31 所 示 。 


Gereral ARMED 


scm Gt 
Repostores 
Branches to buis = 
Branch Specifier (blank for ‘any) “master e 
Add Branch. 
massa (em * 


ЕЗ - ейтен G е 


图 5. 31 “流水 线 ” 标 签 页 


(9) 保存 新 建 的 Jenkins 任务 simple-java-maven-app。 

СТО) 再 新 建 一 个 自由 风格 的 软件 项 目 report, E General 标签 页 选中 “使 用 自 定义 的 工 
作 空 间 ” ,输入 simple-java-maven-app 项 目的 本 地 目录 ,如 图 5. 32 所 示 。 

(11) 单 击 “构建 触发 器 ”标签 页 ,选中 Build after other project are built, 在 Project to 
watch 文本 框 输入 simple-java-maven-app. #10 5. 33 所 示 。 
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General RSE ERE қина юш HRS 


© 关闭 构建 © 
О «ёшюн so e 
© ees e 
目 rod e 
日 该 项 目的 上 游 项 目 正在 构建 时 阻止 这 项目 构建 e 
© REQ TERS fc tcn [B HOA B n e 
f massis e 
ы 
arate e 
EB - ° 
图 5.32 自 定义 工作 空间 
General SAUR 构建 环境 юш юан 
© Subversion © 


à 

H 

š 
u 
: 

£ 
ee 


@ Trigger only if build is stable 
© Trigger even if the build is unstable 


© Trigger even if the build fails 
F Buad neriodic all 


EN ^ 
保存 


图 5.33 构建 触发 器 设置 


eee 


(12) 单 击 * 构 建 标 签 页 ,增加 构建 步骤 一 -执行 shell, 输 入 shell 脚本 ,如 图 5. 34 
所 示 。 

本 步骤 的 目的 是 为 了 消除 错误 “ERROR: Step ‘Publish JUnit test result report’ 
failed: Test reports were found but none of them аге new. Did leafNodes run? ”。 

(13) 单 击 “ 构 建 后 操作 ”标签 页 ,增加 构建 后 操作 步骤 Publish JUnit test result report, 
在 “测试 报告 "文本 框 中 输入 target/surefire-reports/ * . xml, 如 图 5. 35 所 示 。 


Jenkins » repon > 
General 源码 管理 num 构建 环境 @) RESF 


执行 shell 


CT target/surefire-reports, 
se 


图 5.34 增加 构建 步骤 


General STE CRRA њила ки калт 


элин (XML) 
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Esleset ‘includes’ setting that specifies the generated raw XML report 


files, such as 'myprojecttargettest-reports/" xml’. Basedir of the 
fileset is the workspace root 


SRK 
Health report amplification factor 10 


1% failing tests scores as 99% health. 5% failing tests scores as 95% 


š: © Do not fail the build on empty test results 


图 5.35 增加 构建 后 操作 步骤 


5.3.3 创建 流水 线 脚本 
创建 流水 线 脚本 的 步骤 如 下 : 


(1) 在 Eclipse 中 ,从 Git 导入 Github 的 项 目 , 如 图 5.36 和 图 5.37 所 示 。 


(2) 编辑 Jenkinsfile 文件 ,如 下 : 
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{& Import Projects from Git u Ea za) 
GIT 
Enter the location of the source repository. | 
Location 
URI: https://github.com/kehuagao/bmsdesktop.git | Local File... 
Host: github.com| 
Repository path: /kehuagao/bmsdesktop.git | 
Connection 
Protocol: |https ~| 
Port: [| | 
205 
User: kehuagao 
Password: *eeees... 
Store in Secure Store 


© 


D Project Ex... 3 B29 
asle 了 
> BB demo [boot] 
» By demo4lasmine [demo 
4 @ > demo4maven idem 
> £y jenkins 
4 Gy sre 


> Gy main 


В pomami 
В READMEmd 
› 8) MyWeb 


pipeline { 
agent апу 
stages { 


stage('Build' 


steps { 
bat 'd:' 


erm rnm NN 


Р 5.36 从 Git A Github 的 项 目 


Mooctest Appium MoocTest Run Window Help — 


D jenkinsfile £2 
1pipeline { 
2 agent any 
stages { 
stage('Build') ( 


3 
4 
5 
6 
7 bat ‘cd D:/.jenkins/workspace/simple-java-maven-api 
8 bat 'mvn -B -DskipTests clean package’ 
9 J 
} 
stage('Test') { 
steps { 

bat 'mvn test' 


post { 
gime r | 


5.37 导 人 成功 后 的 画面 


M 


аргад ORF s P ә: 
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bat 'cd D: /. jenkins/workspace/simple - java — maven - app@script' 
bat 'mvn -B - DskipTests clean package' 
) 
) 
stage('Test') ( 
steps ( 
bat 'mvn test’ 


} 


post { 
always { 
junit 'target/surefire – reports/ * . xml' 
) 


(3) 将 更 新 后 的 项 目 文件 提交 到 Github, 


6.4 能 力 拓 展 : 在 Docker 中 运行 Jenkins 


本 节 将 在 Jenkins Docker 环境 展示 5. 3 节 的 示例 。 需 要 注意 的 是 ,Windows 和 Linux 
的 环境 下 使 用 的 脚本 命令 不 同 。 在 Windows 环境 下 用 bat 脚本 命令 ,在 Linux 环境 下 用 sh 
脚本 命令 。 此 外 ,与 5. 3 节 不 同 的 是 ,本 节 的 示例 是 从 本 地 Git 仓库 获取 源 代 码 ,而 不 是 从 
Github 仓库 获取 源 代码 。 


5.4.1 准备 


硬件 要 求 : 

。 最 低 256 MB 内 存 , 推 荐 512MB 以 上 内 存 。 

。 10 GB 磁盘 空间 用 于 存储 Jenkins、Docker 镜像 和 容器 。 
软件 要 求 : Docker、Git( 可 选 Github Desktop) 


5.4.2 在 Docker 中 运行 Jenkins 


用 Docker 镜像 jenkinsci/blueocean 在 Docker 中 运行 Jenkins 的 步骤 如 下 : 
打开 Docker Quickstart Terminal 命令 提示 符 窗口 ,用 下 面 的 Docker 命令 启动 
jenkinsci/blueocean 镜像 (如 果 还 没有 下 载 镜 像 文件 ,这 个 命令 将 自动 下 载 镜 像 文件 ): 


— u root ^ 
— p 8080:8080 “ 
= v jenkins- data:/var/jenkins home ^ //ik 1 
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— v /var/run/docker. sock: /var/run/docker. sock ^ 
— у $ HOME: /home ^ // 注 2 
jenkinsci/blueocean 
iE. 将 容器 中 的 /var/jenkins_home 目录 映射 到 Docker 卷 jenkins-data。 如 果 卷 
jenkins-data 不 存在 ,那么 就 创建 该 卷 。 也 可 以 将 宿主 机 的 文件 夹 $ HOME/jenkins_data 
映射 到 容器 中 的 /var/jenkins_home。 目 的 都 是 为 了 永久 保存 /var/jenkins_home 中 的 
х. 
Е 2: $ НОМЕ 是 Windows 的 文件 夹 C:\Users\lenovo(lenovo 是 登录 Windows 的 账 
号 ) ,注意 不 必 设 置 环境 变量 HOME。 将 宿主 机 的 $ HOME 路 径 映 射 到 容器 中 的 /home。 
命令 执行 成 功 后 ,在 Firefox 浏览 器 或 Google 浏览 器 地 址 栏 输入 http://localhost: 
8080 ,出 现 如 图 5.38 所 示 的 页 面 。 


Getting Started 


Unlock Jenkins 


To ensure Jenkins is securely set up by the administrator, a password has been written to the log (nex re nhere 12 ting 7) and this file cn the 
server: 


/vaz/jenkins home/secreta/initialhdminPassword 
Please copy the password from either location and paste t below. 


датата 
Р 5.38 输入 Jenkins 管理 员 密码 

查看 容器 ,输入 Docker 命令 : 

docker ps- a 

进入 容器 ,输入 Docker 命令 : 

docker exec — it 容器 ID bash 

查看 密码 ,输入 Linux 命令 : 


cd /var/Jenkins_home/secrets 

vi initialAdminPassword 

输入 密码 后 , 单 击 Continue 按钮 ,出 现 如 图 5. 39 所 示 的 页 面 。 

输入 用 户 名 、 密 码 等 信息 后 , 单 击 Save and Finish 按钮 ,显示 如 图 5. 40 所 示 的 页 面 。 


5.4.3 Fork 和 克隆 Github 上 的 示例 库 


为 了 获取 Github 上 的 示例 “Hello World"Java 应 用 ,首先 必须 fork 示例 库 到 你 自己 的 
Github 账号 下 ,然后 克隆 这 个 分 支 到 本 地 电脑 上 。 
(1) 用 自己 的 账号 登录 Github (可 以 在 Github,http://github. com 免费 注册 一 个 账号 ) 。 


(3) clone 你 的 分 支 simple-java-maven-app 到 本 地 电脑 ,可 选用 如 下 方法 : 
(D 使 用 Github Desktop В. 
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Getting Started 


Create First Admin User 


Bes | 
| g йет. cum S 
=н |É этявсцитю. ишти 
LS 
全 名 
电子 邮件 地 址 - 
Jenkins 2.89.4 Continue as admin Save and Finish 


图 5.39 创建 Admin 账号 


Jenkins is ready! 


Your Jenkins setup is complete. 


Start using Jenkins 


图 5. 40 Jenkins 安装 完成 


(a) fE Github 网 站 ,选择 你 的 分 支 库 , 单 击 Clone or download>Open in Desktop 链接 。 

(b) 在 Github Desktop 中 ,输入 本 地 代码 仓库 路 径 C:\Users\< your-username >\ 
Documents\Github\simple-java-maven-app, 单 击 Clone 链接 。 

@ 使 用 命令 行 时 ， 

(a) 打开 DOS 命令 行 窗口 。 

(b) 改变 目录 到 C:\Users\< your-username >\Documents\Github\。 

(c) 输入 命令 : 

git clone https: //github. com/YOUR — GITHUB — ACCOUNT — NAME/simple — java – maven – app 


这 里 YOUR-GITHUB-ACCOUNT-NAME 是 你 的 Github 账号 。 
5.4.4 在 Jenkins 中 创建 任务 


本 节 将 创建 两 个 Jenkins 任务 : 一 个 流水 线 任务 simple-java-maven-app, 一 个 自由 风格 
的 软件 项 目 任 务 report。 任 务 report 在 任务 simple-java-maven-app 构建 完成 后 自动 执行 。 
与 5.3. 2 节 不 同 的 是 ,流水线 任务 simple-java-maven-app 从 本 地 Git 仓库 获取 源 代码 ,而 不 
是 从 Github 仓库 获取 源 代码 。 
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COD 用 管理 员 账 号 登录 Jenkins, 如 图 5. 41 所 示 。 
Jenkins» 
Gra > 
& n^ 欢迎 使 用 Jenkins'! 
22 asme | es ET. 739) 
d кеше | 
& w views 
© Open Blue ocean 


Ñ. Credentiais 


Ва New view 


图 5. 41 Jenkins 首页 
(2) 单 击 “ 创 建 一 个 新 任务 "链接 或 者 左边 的 “新 建 "按钮 ,如 图 5.42 所 示 。 


构建 一 个 自由 风格 的 软 料 项目 
这 是 Jenions 的 主要 功能 Jenions E MAR TASMOE SORRENTO FETUS UTR 


ажи > 
"OY HEC Ааа ( 出 加 正式 地 应 当 称 为 工作 流 ) . poma qipi Ла: зде з EA 
m. 


Fa 构建 一 个 多 配置 项 目 
AI ISREEIERURB onset T RIGHE 99. 


(e NIIT a урааа раа 
95 xem 
5  MUREPILUBGOHA. RERNE- NISE ARERR астед. ROTATED 
= | 它们 在 不 同 的 文件 SBT, 
图 5.42 创建 Jenkins 任务 页 面 
(D 输入 任务 名 称 simplejava-maven-app ,选择 “流水 线 ”。 单 击 “ 确 定 ” 按 钮 。 单 击 “ 流 
水 线 ? 标 签 , 如 图 5. 43 所 示 。 
在 “定义 ”文本 框 中 选择 Pipeline script from SCM ,告诉 Jenkins 从 源 代码 控制 管理 系 
Ж SCM(clone 的 本 地 Git 仓库 ) 获 取 流水 线 脚本 文件 。 


在 SCM 文本 框 中 选择 Git, 在 Repository URL 文本 框 指定 你 clone 的 本 地 Git 仓库 路 
径 /home/Documents/Github/simple-java-maven-app。 
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Credentials w 加 pm 
aa 
Add Repository 
Branches to build ка 
Branch Specter (Bank toe any) "master. e 
Add Branch 
masia anm ye 


Аббасов Behanows АМ» 


mies) ~ 


图 5.43 设置 流水 线 


单 击 “ 保 存 ” 按 钮 。 保 存 新 建 的 Jenkins 任务 simple-java-maven-app。 

(4) 再 新 建 一 个 自由 风格 的 软件 项 目 report, fÉ General 标签 页 单 击 * 高 级 ”按钮 ,再 选中 
“使 用 自 定义 的 工作 空间 ” 复 选 框 ,输入 simple-java-maven-app 项 目的 本 地 目录 ,如 图 5. 44 
所 示 。 


О gne 

О 该 项 目的 上 游 项 目 正在 构建 时 了 组 止 该 项 目 构建 

О 该 项 目的 下 游 项 目 正在 构建 时 诅 止 该 项 目 构建 
定义 的 工作 空间 


amma °, 


图 5.44 自 定义 工作 空间 


i 


(5) 单 击 “ 构 建 触发 器 "标签 ,选中 “其 他 工程 构建 后 触发 " 复 选 框 ,在 “关注 的 项 目 ” 文 本 
框 输入 simple-java-maven-app,， 如 图 5. 45 所 示 。 

(6) 单 击 “ 构 建 ”标签 ,增加 构建 步骤 一 一 执行 shell, 输 入 shell 脚本 ,如 图 5. 46 所 示 。 

CD 单 击 “ 构 建 后 操作 ”标签 ,增加 构建 后 操作 步骤 Publish JUnit test result report, 在 
“测试 报告 ”文本 框 中 输入 target/surefire-reports/ * . xml, 如 图 5.47 所 示 。 
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图 只 有 构建 珀 十 时 能 发 
о 即使 构建 不 稳定 时 也 全 触发 
O 即使 构建 失效 时 也 会 租 发 


uan... 


图 5.45 构建 触发 器 设置 


Jenkins + repot, 
Genera GR амни назна Cs D каза 


执行 shell =. 
cd target/surefire-reports/ 
жа mea mais 
да. 


图 5.46 增加 构建 
Jenkins > 


report» 
eM наа к= бават) 


Publish JUnit test result report m 


Fileset includes’ setting that specifies the generated 
raw XML report fles, such as ‘myprojecttargettest- 
reports" хт. Basedir of the fileset is the workspace 


foot 
C 保 里 长 的 标准 给 出 /错误 e 
tion factor 10 e 
1% failing tests scores as 99% health. 5% failing tests 


图 5.47 增加 构建 后 操作 步骤 
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5.4.5 创建 流水 线 脚 本 


与 5. 3. 3 节 不 同 的 是 ,Docker 环境 下 Pipline 脚本 中 使 用 的 是 sh, mM Windows 环境 下 
使 用 的 是 bat。 

(1) 使 用 文本 编辑 器 或 IDE 在 你 clone 的 本 地 Git 仓库 simple-java-maven-app 的 根 目 
录 中 创建 一 个 文本 文件 Jenkinsfile, 文 件 内 容 如 下 : 


pipeline { 
agent { 
docker { 
image 'maven:3 一 alpine' iki 
args '- v $ HOME/. m2: /root/.m2' #2 
) 
} 
stages { 
stage( 'Build') { 注 3 
steps { 


sh 'mvn — B - DskipTests clean package' 注 4 
) 


} 


iE 1; image 参数 指定 下 载 Docker 镜像 maven:3-apline( 如 果 你 的 计算 机 上 还 没有 下 载 
这 个 镜像 ) ,并 以 独立 的 容器 运行 这 个 镜像 。 这 表明 : 

。 在 Docker 中 运行 了 两 个 独立 的 容器 Jenkins 和 Maven, 

* Maven 容器 成 为 Jenkins 容器 在 运行 流水 线 项 目 时 使 用 的 代理 。Maven 容器 的 运 

行 是 即时 的 , 它 的 生命 周期 是 流水 线 项 目 运行 期 间 。 

ik 2: args 参数 创建 容器 与 宿主 计算 机 文件 目录 间 的 映射 ,其 目的 是 避免 重复 下 载 构 
建 依赖 的 库 文件 。 

注 3: 定义 了 名 称 为 Build 的 构建 阶段 。 

ik 4: 运行 Maven 命令 。 

保存 Jenkins 文件 ,提交 到 本 地 Git 仓库 simple-java-maven-app ,方法 是 在 simple-java- 
maven-app 目录 下 ,运行 命令 : 

git add . 

git commit — m "Add initial Jenkinsfile" 

在 Jenkins 中 , 单 击 左边 的 Open Blue Ocean 链接 。 

在 This job has not been run 消息 窗口 , 单 击 Run 按钮 ,接着 单 击 右 下 角 出 现 的 OPEN 
链接 ,可 以 看 到 ,Jenkins 正在 运行 流水 线 项 目 。 第 一 次 运行 时 需要 花费 一 点 时 间 ,Jenkins 
将 在 克隆 Git 仓库 simple-java-maven-app 后 运行 代理 ,下 载 Docker 镜像 Maven 并 运行 。 

在 Maven 容器 中 运行 Build. Maven 将 下 载 构建 Java 应 用 依赖 的 库 文 件 ,存储 在 
$ HOME/. m2 中 。 

如 果 Jenkins 成 功 完成 了 构建 ,将 显示 如 图 5. 48 所 示 的 页 面 。 
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图 5. 48 Jenkins 成 功 执行 任务 后 的 页 面 


(2) 在 流水 线 项 目 中 增加 测试 阶段 。 
修改 Jenkins 文件 如 下 : 


pipeline { 
agent { 
docker { 
image 'maven:3 – alpine’ 
args '— v /root/.m2:/root/.m2' 
) 
) 
stages { 
stage( 'Build') ( 
steps ( 
sh 'mvn — В – DskipTests clean package' 
} 
} 
stage('Test') { iki 
steps ( 
sh 'mvn test’ #2 
} 
post { 
always { 
junit 'target/surefire - reports/ * .xml' 注 3 
) 
) 
} 
} 


} 

YE 1: 定义 测试 阶段 。 

注 2: 执行 Maven 命令 ,生成 Junit XML 报告 ,保存 报告 到 Jenkins 容器 的 目录 /var/ 
jenkins_home/workspace/simple-java-maven-app/target/surefire-report F 。 

ik 3: 本 步骤 将 打包 Junit XML 报告 使 得 我 们 可 以 在 Jenkins 界面 查看 这 个 报告 。 

保存 Jenkins 文件 ,提交 到 本 地 Git 仓库 simple-java-maven-app ,方法 是 在 simple-java- 
maven-app HR F ,运行 命令 : 


git stage. 
git commit — m "Add 'Test' stage" 
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在 Jenkins 中 , 单 击 左边 的 Open Blue Ocean 链接 。 
(3) 在 流水 线 项 目 中 增加 发 布 阶段 。 
修改 Jenkins 文件 如 下 : 


pipeline { 
agent { 
docker { 
image 'maven:3 一 alpine' 
args '— v /root/.m2:/root/.m2' 
) 
} 
stages { 
stage( 'Build') { 
steps { 
sh 'mvn — B – DskipTests clean package’ 
} 
} 
stage('Test') ( 
steps { 
sh 'nvn test" 
) 
post ( 
always ( 
junit 'target/surefire – reports/ * .xml' 
) 
) 
) 
stage( 'Deliver') ( iki 
steps { 
sh '. /jenkins/scripts/deliver. sh' ik2 
) 


) 

ik 1. 定义 发 布 阶段 。 

ik 2: 运行 脚本 deliver. sh ,为 了 使 得 Jenkins 文件 更 简洁 ,常常 把 包含 多 个 步骤 的 阶段 
放 在 独立 的 脚本 文件 中 。 

保存 Jenkins 文件 ,提交 到 本 地 Git 仓库 simple-java-maven-app ,方法 是 在 simple-java- 
maven-app 目录 下 ,运行 命令 : 


git stage. 
git commit — m "Add 'Deliver' stage" 


实 训 任务 


任务 1: 安装 Jenkins, 记 录 安 装 过 程 ,编写 安装 说 明 书 。 
任务 2: 将 图 书 管理 系统 的 代码 上 传 到 Github, 使 用 Jenkins 进行 集成 测试 。 


系统 测试 


本 章 主 要 内 容 
系统 测试 简介 
Selenium 和 Robot Framework 演练 
黑金 测试 技术 


OpenOLAT 的 文档 TESTING. README. LATEST 'f fi xt FF BY 4] iif “Execute jUnit 
integration tests,junit integration tests that load the framework to execute (execution time 
ca. 10m), Execute selenium functional integration tests.selenium integration tests which 
started the whole web application in Tomcat (execution time ca. 30-45m)” 

由 此 可 见 , 开 源 项 目 OpenOLAT 中 大 量 使 用 了 JUnit 和 Selenium 进行 单元 测试 、 功 能 
测试 和 集成 测试 。 

本 章 首先 对 系统 测试 进行 简单 介绍 ; 然后 介绍 系统 测试 常用 工具 ; 接着 重点 介绍 了 系 
统 测试 框架 Selenium 和 Robot Framework 的 使 用 方法 ; 最 后 介绍 系统 功能 测试 用 例 设计 
技术 一 一 黑 盒 测试 技术 。 


6.1 什么 是 系统 测试 


集成 测试 完成 以 后 ,就 得 到 了 一 个 完整 的 软件 系统 ,但 是 还 不 能 将 之 投放 市 场 或 交付 用 
户 验 收 ,还 必须 经 过 严格 的 系统 测试 。 


6.1.1 系统 测试 简介 


系统 测试 是 在 V 模型 中 的 继 单元 测试 、 集 成 测试 之 后 的 第 三 个 级 别 的 测试 。 

系统 测试 是 基于 软件 需求 说 明 书 的 测试 ,在 单元 测试 或 集成 测试 阶段 ,主要 是 依据 软件 
详细 设计 或 概要 设计 文档 ,从 软件 开发 者 的 角度 对 软件 进行 测试 。 系 统 测试 是 从 最 终 用 户 
的 角度 对 软件 进行 的 测试 。 系 统 测试 的 目的 是 验证 系统 是 否 满足 了 需求 规格 的 定义 , 找 出 
与 需求 规格 不 符合 或 矛盾 的 地 方 。 

系统 测试 的 对 象 不 仅 包括 需要 测试 的 软件 产品 ,还 包含 软件 所 依赖 的 硬件 .外 设 甚至 包 
括 某 些 数 据 ` 某 些 支持 软件 及 其 接口 等 。 因 此 ,必须 将 系统 中 的 软件 与 各 种 依赖 的 资源 结合 
起 来 ,在 系统 实际 运行 环境 下 来 进行 测试 。 
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系统 测试 依据 : 

+ 系统 和 软件 需求 规格 说 明 。 

° 用 例 。 

。 功能 规格 说 明 。 

* 风险 分 析 报 告 。 

典型 系统 测试 对 象 : 

。 系统 管理 手册 和 用 户 操作 手册 。 

。 系统 功能 和 非 功能 需求 。 

。 系统 中 使 用 的 数据 。 

系统 测试 关注 的 是 在 开发 项 目 或 程序 中 定义 的 一 个 完整 的 系统 /产品 的 行为 。 在 主 测 
试 计划 和 /或 在 其 所 处 测试 级 别 的 测试 计划 内 应 该 明确 测试 范围 。 

在 系统 测试 中 ,测试 环境 应 该 尽量 和 最 终 的 目标 或 生产 环境 相 一 致 ,从 而 减少 不 能 发 现 
与 环境 相关 的 失效 的 风险 。 

系统 测试 可 能 包含 基于 不 同方 面 的 测试 : 基于 风险 评估 的 、 基 于 需求 规格 说 明 的 、 基 于 
业务 过 程 的 .基于 用 例 的 ,基于 其 他 对 系统 行为 的 更 高 级 别 描述 或 模型 的 ,基于 与 操作 系统 
的 相互 作用 的 、 基 于 系统 资源 等 的 测试 。 系 统 测试 包括 对 系统 各 个 方面 的 测试 ,系统 测试 的 
主要 内 容 有 功能 测试 ,性 能 测试 .安全 性 测试 等 。 传 统 上 ,人 们 关注 更 多 的 是 功能 测试 , 因 
此 ,本 章 只 介绍 功能 测试 ,第 7 章 将 介绍 性 能 测试 ,第 8 章 将 介绍 安全 性 测试 。 

系统 测试 应 该 对 系统 功能 和 非 功能 需求 进行 研究 。 需 求 可 以 以 文本 形式 或 模型 方式 描 
述 。 同 时 测试 员 也 需要 面 对 需 求 不 完全 或 需求 没有 文档 化 的 情况 。 针 对 功能 需求 的 系统 测 
试 开 始 时 可 以 选择 最 适合 的 基于 规格 说 明 的 测试 , 即 黑 盒 技术 来 对 系统 进行 测试 。 比 如 ,可 
以 根据 业务 准则 描述 的 因果 组 合 来 生成 决策 表 。 基 于 结构 的 技术 即 白 盒 测试 技术 ,可 以 评 
估 测 试 的 覆盖 率 , 可 以 基于 评估 覆盖 一 个 结构 元 素 , 如 菜单 结构 或 者 页 面 的 导航 等 的 完 
整 性 。 

系统 测试 通常 由 独立 的 测试 团队 进行 。 


6.1.2 系统 测试 工具 


以 下 介绍 几 个 系统 测试 工具 。 


1. Selenium 简介 


Selenium 是 一 个 开源 的 自动 化 测试 工具 ,主要 用 于 Web 应 用 的 自动 化 测试 。Selenium 
得 到 了 主要 浏览 器 供应 商 的 支持 ,这 些 供应 商 已 经 或 正在 将 Selenium 作为 浏览 器 的 一 个 组 
成 部 分 。Selenium 还 是 很 多 其 他 基于 Web 的 自动 化 测试 工具 、API 和 框架 的 核心 技术 。 

Selenium 起 源 于 2004 年 ,Jason Huggins 在 ThoughtWorks 公司 从 事 软 件 测试 工作 ， 
他 厌倦 了 手工 进行 重复 的 测试 ,开发 了 一 个 JavaScript 库 , 这 个 JS 库 能 够 操作 Web 页 面 ， 
允许 在 多 个 浏览 器 上 重复 自动 执行 测试 。 这 个 JS 库 就 是 Selenium 的 核心 ,Selenium RC 
和 Selenium IDE 是 基于 这 个 JS 库 的 。Selenium 的 创新 之 处 在 于 它 允 许 你 用 自己 喜欢 的 语 
言 控制 浏览 器 。 

尽管 Selenium 是 一 个 很 好 的 工具 , 它 也 存在 不 足 。 随 着 Web 应 用 的 功能 越 来 越 强 大 ， 
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它 的 不 足 更 加 明显 。 

Google 是 Selenium 的 忠实 客户 ,但 是 Google 的 测试 工程 师 需 要 弥补 Selenium 的 不 
Æ. 2006 年 Google 工程 师 Simon Stewart 启动 了 WebDriver 项 目 。 其 目的 是 解决 
Selenium 存在 的 问题 ,使 用 浏览 器 和 操作 系统 的 “原生 ”方法 ,使 测试 工具 直接 与 浏览 器 交 
H ,避免 受 到 JavaScript 的 影响 。 

2008 年 ,Jason Huggins 和 Simon Stewart 感到 ,Selenium 和 WebDriver 可 以 相互 取 长 
补 短 ,为 用 户 提供 更 好 的 自动 化 测试 工具 。 因 此 ,Selenium 和 WebDriver 合并 了 。 

现在 ,Selenium 工具 集 包 含 三 个 工具 Selenium2/Seleniuml ,Selenium IDE 和 Selenium Grid, 

Selenium 2; Selenium 2 是 Selenium 与 WebDriver 合并 后 的 产物 ,是 Selenium 未 来 的 
发 展 方向 。 

Selenium 1: 是 Selenium 的 早期 工具 ,原来 的 名 字 是 Selenium RC 或 Remote Control。 
现在 已 经 过 时 了 ,不 再 开发 。 

Selenium IDE: 是 创建 测试 脚本 的 原型 工具 ,IDE 即 集成 开发 环境 。 它 是 Firefox 浏览 
器 或 Google 浏览 器 的 一 个 插件 ,用 于 记录 测试 操作 步骤 ,输出 多 种 语言 的 可 重复 执行 的 测 
试 脚本 。 尽 管 Selenium 可 以 直接 保存 为 测试 操作 步骤 ,但 是 ,这 样 的 操作 步骤 不 支持 循环 
和 条 件 语句 ,因此 ,不 适合 测试 自动 化 。 必 须 将 这 样 的 测试 操作 步骤 另存 为 一 种 Selenium 
支持 的 编程 语言 的 测试 脚本 ,并 修改 这 个 测试 脚本 ,才能 用 于 测试 自动 化 。 这 就 是 它 作为 创 
建 测试 脚本 的 原型 工具 的 意义 。 

Selenium Grid: 允许 在 不 同 环境 中 运行 大 规模 测试 。 这 些 测试 可 以 并 行 执行 , 即 在 同 
一 时 刻 ,在 不 同 的 计算 机 上 和 运行 同一 个 项 目的 大 量 不 同 测试 。Selenium 可 以 提高 测试 的 效 
率 , 节 省 测试 的 时 间 。 

对 于 初学 者 来 说 ,可 以 使 用 Selenium IDE 熟悉 Selenium 命令 ,很 容易 地 创建 简单 的 自 
动 化 测试 脚本 。Selenium IDE 不 适合 用 于 正式 的 测试 项 目 。 在 正式 的 测试 项 目 中 ,主要 是 
使 用 Selenium 2/Selenium 1 提供 的 API, 用 Selenium 支持 的 一 种 语言 (Java、C# 、Python、 
Ruby、PHP、Perl、JavaScript) 编 写 测试 脚本 ,完成 测试 。 对 于 初次 采用 Selenium 的 公司 来 
说 ,使 用 Selenium2 就 可 以 。 


2. UFT 简介 


ОЕТ 是 HP 公司 提供 的 商业 软件 。 

QuickTest Professional 简称 ОТР. 提供 适应 所 有 主要 应 用 软件 环境 的 功能 测试 和 回 
归 测 试 的 自动 化 功能 。 采 用 关键 字 驱 动 的 理念 以 简化 测试 用 例 的 创建 和 维护 。 它 让 用 户 可 
以 直接 录制 屏幕 上 的 操作 流程 ,自动 生成 功能 测试 或 者 回归 测试 用 例 。 专 业 的 测试 者 也 可 
以 通过 它 提供 的 内 置 脚本 和 调试 环境 来 取得 对 被 测试 对 象 属性 的 完全 控制 。QTP 是 
Mercury 公司 的 产品 ,是 业界 著名 的 自动 化 测试 工具 软件 。Mercury 公司 被 HP 公司 收购 
后 ,HP 公司 在 ОТР 的 基础 上 不 断 完 善 QTP, 在 新 的 版 本 中 将 其 更 名 为 ОЕТ (Unified 
Functional Testing) 。 

UFT 具有 如 下 特点 : 

* 广泛 的 技术 支持 ,UFT 对 主要 的 软件 类 型 和 环境 提供 功能 测试 和 回归 测试 自动 化 。 

支持 的 软件 开发 技术 或 应 用 类 型 包括 Web 2. 0, REST, SOA 服务 、ERP、CRM。 
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ПЕТ 还 支持 跨 浏 览 器 的 测试 ,对 不 同 的 浏览 器 (例如 , Chrome, Firefox, IE 和 
Safari) ,只 需 编 写 一 次 测试 脚本 ,就 可 以 重复 播放 这 个 测试 脚本 。 
ОЕТ 与 Jenkins 等 持续 集成 工具 软件 一 起 工作 。 通过 将 ОЕТ 与 Jenkins 进行 整合 ， 
功能 和 回归 测试 可 以 作为 定期 构建 过 程 的 一 部 分 进行 触发 ,在 Micro Focus ALM 
或 Micro Focus Quality Center 中 运行 结果 报告 ,并 且 会 立即 将 问题 报告 给 开发 团队 ， 
使 得 他 们 能 够 及 时 人 处理 问题 ,确保 开发 进度 。UFT 还 包括 用 于 在 Visual Studio/C # ak 
Eclipse/Java 中 创建 测试 的 精益 功能 测试 (Lean Functional Testing, Lean ЕТ) (4. 
UFT 与 Micro Focus Sprinter 整合 ,可 以 录制 测试 脚本 实现 测试 自动 化 。 
API 和 GUI 测试 可 清楚 地 显示 在 图 形 画 布 上 ,测试 人 员 可 在 其 中 有 效 地 管理 操作 、 
更 改 测试 顺序 .运行 和 调试 测试 ,以 及 管理 各 种 参数 。 
只 需 写 一 个 测试 脚本 ,就 可 以 对 不 同 的 移动 应 用 平台 、 移 动 设备 和 浏览 器 上 的 移动 
应 用 进行 测试 。 
ОЕТ 支持 关键 字 驱 动 测试 ,通过 录放 测试 脚本 简化 测试 开发 和 维护 ; 也 支持 基于 脚 
本 的 测试 ,通过 编写 脚本 ,对 被 测 对 象 及 其 属性 进行 控制 。 
ОЕТ 促进 团队 之 间 的 测试 自动 化 协作 。 基 于 开放 的 XML 格式 ,UFT 对 象 库 管理 
器 允许 协作 和 共享 应 用 程序 对 象 定义 ,在 整个 测试 创建 工作 中 保持 对 象 级 别 的 更 改 
同步 。 

下 面 通过 案例 , 揭 开 ОЕТ 的 真实 面目 吧 ! 

案例 : HP 公司 的 成 长 历史 。 

1957 年 ,HP 公司 上 市 。 

1976 年 ,Brian Reynolds 开创 Micro Focus。 

1979 年 ,Novell 成 立 。 

1981 年 ,Borland 成 立 。Philippe Kahn 的 Borland Software 迅速 成 为 PC 编译 器 和 开 
发 工具 领域 的 世界 领导 者 。 

1983 年 ,Micro Focus 在 伦敦 证 券 交 易 所 上 市 ,公司 成 功 跻 身 国际 市 场 。 

1989 年 ,Mercury Interactive 成 立 。Amnon Landan 和 Arye Finegold 的 软件 公司 在 成 
立 后 迅速 成 为 软件 质量 方面 的 世界 领导 者 。 

1992 年 ,SUSE R. SUSE 是 首 家 提供 Enterprise LINUX 发 行 套件 的 供应 商 。 

1995 年 ,NetIQ 成 立 。 公 司 专 注 于 性 能 监测 软件 。 

1998 年 , Micro Focus 被 Intersolv 收购 。 公 司 业 务 扩 展 到 基于 ITIL (Information 
Technology Infrastructure Library, 信 息 技术 基础 架构 库 ) 的 IT 服务 管理 软件 。 

2005 年 ,Micro Focus 在 伦敦 证 券 交 易 所 重新 上 市 。 

2005 年 ,HP 收购 Peregrine Systems 公司 ,业务 扩展 到 基于 ITIL 的 IT 服务 管理 
软件 。 

2006 年 ,HP 收购 Mercury Interactive 公司 ,软件 产品 组 合 持续 增长 。 

2007 年 ,Micro Focus 收购 HAL Knowledge Systems 等 公司 ,此 次 收购 预示 着 持续 收 
购 时 代 的 来 临 。 

2009 年 ,Micro Focus 收购 Borland, 此 次 收购 还 包括 Compuware 的 软件 测试 业务 和 
NetManage。 
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2011 年 ,Novell 被 Attachmate Group 收购 。 

2014 年 ,Micro Focus 收购 Attachmate Group, 该 公司 旗下 现 包 含 Attachmate, Novell, 
NetIQ 和 SUSE. 

2015 年 ,Micro Focus 收购 Authasas 公司 ,业务 范围 扩大 ,包含 企业 鉴定 解决 方案 。 

2015 年 ,HP 拆 分 为 HPE 和 HPI。 公 司 向 新 的 方向 迈进 ,将 消费 者 产品 与 企业 产品 
THs 

2016 年 ,Micro Focus 收购 Serena, 该 公司 专注 于 业务 应 用 程序 开发 。 

2016 年 ,Micro Focus 收购 GWAVA, 该 公司 专注 于 企业 安全 存档 和 讯息 交换 。 

2017 年 ,HPE Software 与 Micro Focus 合并 ,成 为 最 大 的 专营 软件 公司 之 一 。 


3. IBM Rational Functional Tester 


IBM Rational Functional Tester 是 IBM 公司 提供 的 商业 软件 。 

IBM Rational Functional Tester 是 一 个 面向 质量 保证 (QA) 团 队 的 自动 化 功能 测试 和 
回归 测试 解决 方案 ,可 用 于 检验 基于 Java, Web, Microsoft Visual Studio . NET .终端 应 用 、 
SAP, Siebel 及 Web 2.0 应 用 的 质量 。 


4. IBM Rational Robot 


IBM Rational Robot 是 IBM 公司 提供 的 商业 软件 。 

IBM Rational Robot 可 以 让 测试 人 员 对 .NET、Java、Web 和 其 他 基于 GUI 的 应 用 程 
序 进行 自动 的 功能 性 回归 测试 。 

IBM Rational Robot 可 以 很 容易 地 使 手动 测试 小 组 转变 到 自动 测试 上 来 。 使 用 IBM 
Rational Robot 进行 回归 测试 是 进行 自动 化 测试 初期 很 好 的 选择 ,因为 它 易于 使 用 ,并 且 可 
以 帮助 测试 者 在 工作 过 程 中 学 习 一 些 自动 测试 的 知识 。 

IBM Rational Robot 允许 经 验 丰富 的 测试 自动 化 工程 师 使 用 黑 盒 测试 设计 技术 ,设计 
测试 用 例 ,编写 测试 脚本 ,进行 功能 自动 化 测试 。 

IBM Rational Robot 为 诸如 菜单 .列表 和 位 图 这 些 通用 的 对 象 提 供 测试 用 例 和 为 特定 
于 开发 环境 的 对 象 提供 专用 的 测试 用 例 ,减少 了 测试 开发 的 成 本 。 


6.2 Selenium #227 


本 节 讲 解 Selenium IDE 的 安装 和 使 用 以 及 使 用 Eclipse 开发 Selenium 测试 。 
6.2.1 Selenium IDE 的 安装 


方法 1: Selenium IDE # Firefox 浏览 器 的 插件 ,可 以 按照 Firefox 浏览 器 的 插件 安装 
方法 安装 。 本 书 使 用 的 Firefox 的 版 本 是 60.0。 单 击 Firefox 右上 角 的 “打开 菜单 "图标 , 然 
后 单 击 “ 附 加 组 件 ” 菜 单项 。 单 击 浏览 器 左边 的 “插件 ”链接 ,在 搜索 框 中 输入 Selenium 
IDE, 单 击 搜索 图 标 ,然后 单 击 搜索 结果 中 的 Selenium IDE 项 , 按 提示 安装 即 可 ,如 图 6.1 
所 示 。 
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找到 “selenium ide”) 35 个 结果 


inem 搜索 结果 


иже Katalon Recorder (Selenium IDE for FF55*) 
Best Selenium IDE record, play, debug app. Exports 


т=з Y Selenium WebDriver code. Provides reports, logs, 
тот screenshots. Fast & extensible. 
dic do s 
所 有 м o - Best Test Automat ution 
Ecke 


for Selenium tests. it is implemented as a Firefox 


GS Ы extension, and allows you to record, edit, and debug 
tests. 
fte dede Selenium 


图 6.1 搜索 Selenium IDE 插件 


方法 2: 用 Firefox 打开 https://addons. mozilla. org/en-US/firefox/addon/selenium- 


ide/ , 单 击 Add to Firefox 按钮 就 可 以 了 ,如 图 6.2 所 示 。 


à] Firefox Add-ons explore 


Experimental X зв m РОТУ 
x: Ratings Overall 
Rating 


Selenium IDE 


by Selenium 
Selenium IDE is an integrated development 


environment for Selenium tests. It is ETE 
implemented as a Firefox extension, and allows Чаи 


you to record, edit, and debug tests. 


Rate your experience ‘Screenshots 


How are you enjoying your experience with === 


图 6.2 Firefox 浏览 器 中 增加 Selenium IDE 插件 


6.2.2 Selenium IDE 的 使 用 


以 Selenium 3. 11. 0 为 例 ,Selenium IDE 启动 后 的 界面 如 图 6. 3 所 示 。 


Selenium IDE 的 工具 栏 包含 了 记录 测试 步骤 、 控 制 测 试用 例 执行 的 按钮 ,如 图 6. 4 


所 示 。 
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[es > ga Or 


Search tests. [ Playback base URL 


me Command | Target 


Runs:0 Failures: 0 


Log 


图 6.3 Selenium IDE 启动 后 的 界面 


> sd б” e 
图 6.4 Selenium IDE 的 工具 栏 


© > 速度 调节 按钮 ,控制 测试 用 例 的 执行 速度 。 
p: 运行 测试 套件 按钮 。 
> 


运行 所 选 的 测试 用 例 按钮 。 
1 暂停 /恢复 当前 执行 /暂停 的 测试 用 例 按钮 。 
终止 当前 运行 的 测试 用 例 按钮 。 
Sa 单 步 执行 测试 用 例 按钮 ,一 次 执行 一 条 命令 ,用 于 调试 测试 用 例 。 
@ 记录 在 浏览 器 中 的 操作 按钮 。 
测试 用 例 面板 上 部 用 于 显示 测试 脚本 ,如 图 6.5 所 示 。 
Command Target Value 
1. open / 
2. click at css=altitle="Sele 36,9 
nium Projects") 
3. click at xpath=(//a[contai 50,4 
ns(text()/Seleniu 
mIDE)])[2] 


图 6.5 测试 用 例 面板 上 部 
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Command 列 显示 的 是 命令 ,Target 列 显示 的 是 命令 的 第 1 个 参数 , Value 列 显 示 的 是 
命令 的 第 2 个 参数 , 它 是 与 第 1 个 参数 对 应 的 值 。 
测试 用 例 控制 板 下 部 用 于 编辑 测试 脚本 ,如 图 6.6 所 示 。 


Command click at ` 
Target css=altitle="Selenium Projects"] Ra 
Value 36,9 

Comment 


图 6.6 测试 用 例 控 制 板 下 部 
在 Command 域 可 以 输入 完整 的 命令 ,也 可 以 只 输入 命令 的 前 面 儿 个 字符 ,然后 在 下 拉 
框 中 选择 命令 。 
在 Comment 域 输入 注释 。 
导航 面板 用 于 显示 测试 用 例 和 测试 套件 ,在 Tests 下 拉 列 表 框 
中 可 选择 切换 显示 测试 用 例 (Tests) 或 测试 套件 (Test suits) 。 在 搜 
索 框 可 以 搜索 测试 用 例 。 导 航 面板 如 图 6.7 所 示 。 Tests 
测试 用 例 和 测试 套件 组 成 测试 项 目 , 单 击 Selenium IDE 右上 Test suites 
角 的 保存 按钮 ,将 把 测试 项 目 保存 为 . side 格式 文件 , 单 击 Selenium 
IDE 右上 角 的 打开 按钮 将 打开 已 保存 的 测试 项 目 。 图 6.7 导航 面板 
控制 台面 板 包 含 了 日 志 控 制 台 , 日 志 控 制 台 显示 执行 测试 用 例 
时 的 一 些 信息 和 错误 信息 ,这 些 信息 有 助 于 测试 用 例 的 调试 。 单 击 日 志 控 制 台 右上 角 的 * 清 
除 ? 按 钮 可 以 清除 日 志 信息 。 控 制 台面 板 如 图 6.8 所 示 。 


Tests ~ 


Log © 


1. Trying to execute open on /... Success 

2. Trying to execute clickAt on css=a[title="Selenium Projects"] with value 36,9... Success 

3. Trying to execute clickAt on xpath=(//a[contains(text(),'Selenium IDE')])[2] with value 50,4... Success 
‘Selenium IDE' completed successfully 


图 6.8 控制 台面 板 


6.2.3 用 Eclipse 开发 Selenium 测试 


可 以 使 用 Java, C € , Python, Ruby, PHP, Perl, JavaScript 编程 语言 开发 Selenium 测 
试 。 本 节 以 Java 为 例 , 讲 解 开 发 Selenium 测试 的 一 般 方法 。 

Selenium 2 为 每 一 种 编程 语言 提供 了 WebDriver API, 使 用 Java 语言 开发 Selenium 需 
要 下 载 相应 的 文件 ,例如 selenium-java-3. 11. 0. zip. 

通过 Selenium 官方 网 站 的 下 载 网 址 https://www. seleniumhq. org/download/ ,可 以 
下 载 Selenium Server,Selenium 浏览 器 驱动 和 WebDriver API, 

如 果 浏 览 器 和 测试 运行 在 同一 台 计算 机 上 ,并 且 测 试 只 使 用 Selenium WebDriver, 那 
么 ,就 不 必 运 行 Selenium Server. WebDriver 将 直接 运行 浏览 器 。 在 如 下 情况 需要 运行 
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Selenium Server: 
。 使 用 Selenium Grid 进行 分 布 式 测 试 ( 在 多 台 计 算 机 或 多 个 虚拟 机 中 进行 测试 ) 。 
。 想 要 连接 到 远程 计算 机 ,远程 计算 机 与 本 地 机 有 不 同 版 本 的 浏览 器 。 
* 使 用 其 他 编程 语言 (例如 ,Python、C# 和 Ruby) 以 及 想 要 使 用 HtmlUnitDriver。 


1. 任务 描述 


用 户 登录 界面 让 用 户 输入 用 户 名 和 密码 , 当 用 户 输入 正确 的 用 户 名 后 , 音 击 “登录 "按钮 
可 以 成 功 登录 系统 , 当 用 户 输入 的 用 户 名 或 密码 有 错误 时 ,提示 “输入 的 用 户 名 或 密码 错误 ， 
请 重新 输入 "。 

根据 上 述 要 求 , 使 用 Selenium 编写 自动 化 测试 代码, 完成 用 户 登 录 的 功能 测试 。 


2. Selenium 编程 的 一 般 步 又 


CD 检查 浏览 器 驱动 程序 是 否 在 Path 环境 变量 包含 的 目录 中 ,例如 ,Firefox 浏览 器 的 
驱动 程序 是 geckodriver. exe。 

(2) 在 Eclipse 中 新 建 Java 项 目 Test6。 

(3) 设置 库 文 件 , 新 建 一 个 用 户 自 定 义 库 Selenium, 包 含 selenium-java-3. 11. 0. zip X 
件 中 的 文件 client-combined-3. 11. 0. jar 和 libs 文件 夹 中 的 所 有 jar 文件 。 

(4) 编写 测试 代码 ,在 Java 项 目 Test6 中 新 建 JUnit Test Case, 命 名 为 LoginTest, 代 
ШШЕ: 


import static org. junit. Assert. *; 


import org. junit. After; 

import org. junit. AfterClass; 

import org. junit. Before; 

import org. junit. BeforeClass; 

import org. openga. selenium. By; 

import org. openga. selenium. WebDriver; 

import org. openga. selenium. firefox. FirefoxDriver; 


public class LoginTest { 

private WebDriver driver; 

private String baseUrl; 

private String expUrl = "http://10. 60. 4. 252:8080/auth/MyCoursesSite/0"; 


@BeforeClass 
public static void setUpBeforeClass() throws Exception { 


i 


@AfterClass 
public static void tearDownAfterClass() throws Exception { 
} 


@Before 

public void setUp() throws Exception { 
driver = new FirefoxDriver() ; 
baseUrl = "http://10. 60. 4. 252:8080/"; 


(After 


第 6 章 “ 系 统 测试 


public void tearDown() throws Exception { 


driver. 


} 


.quit(); 


@org. junit. Test 
public void test() { 


driver. 
driver. 
driver. 
driver 
driver. 
driver. 


.get(baseUrl); 


. findElement(By. id("o fiooolat login name")).clear(); 
.findElement(By.id("o fiooolat login name")). sendKeys("kehuagao") ; 

. findElement(By. id("o fiooolat login pass")).clear(); 

.findElement(By. id("o fiooolat login pass")).sendKeys("Kevin610110"); 
.findElement(By. id("o fiooolat login button")).click(); 


assertEquals(expUrl,driver.getCurrentUrl()); 


( 


a 


2 Package Е 


xplorer иан ^ D 


POR tae ey > 
|| Finished after 13.363 seconds 


Runs: 1/1 


B Errors: O В Failures: 0 


> li LoginTest (Runner: JUnit 4] (13.209 s) 


fas 


) 运行 JUnit Test, 结 果 如 图 6.9 所 示 。 


ca | m 


BD LoginTestjava Ñ a= PC 


l*import static org. junit.Assert.*;(] В 


10 

11 public class LoginTest { 1 
private WebDriver driver; 
private String baseUrl; 
private String expUrl="http://10.60.4.252:8080/auth/MyCo 


@eforeClass 
public static void setUpBeforeClass() throws Exception { 


D 


Ж Problems € Javadoc È Declaration E) Console 31 ©) Error Log RE TestNG ый: 


в x ж RE P| 品目 - r: 
«terminated» LoginTest (1) JUnit] CAProgram Files\Java\jdk1.8.0.91\bin\javaw.exe (20185168 17:46:36) __ 
1526427999620 рескойгімег INFO geckodriver 0.20.1 (685f1%* 
1526427999665 рескойгімег INFO Listening on 127.0.0.1: 31 
1526428000634 тоггиппег: : runner INFO Running command: * 
[GFX1-]: Mismatched driver versions between the registry 8.840. 
Unable to read VR Path Registry from C:\Users\lenovo\AppData\Lo 


1 i * rosnurce://addoninstaller/common is line 109- 
SEE 


| Writable | Smartinsert | 29:1 


图 6.9 JH Eclipse ЖЖ Selenium 测试 


6.3 RF Selenium 操作 演练 


本 节 首 先 介绍 Robot Framework. $&Jri 4r КЕ 测试 环境 的 安装 和 演示 RF Selenium 


测试 示例 。 
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6. 


3.1 Robot Framework 简介 


Robot Framework (VA F ñ f& RF) 是 一 种 基于 可 扩展 关键 字 驱 动 的 自动 化 测试 框架 。 
RF 是 使 用 Python 开发 的 开源 软件 ,由 Nokia Siemens Networks 开发 并 提供 支持 。 
RF 具有 如 下 特点 : 


RF 的 架构 如 图 6. 10 所 示 。 


易于 重用 ,采用 表格 式 语法 ,统一 测试 用 例 格式 。 

重用 性 好 ,可 以 利用 现 有 关键 字 来 组 合 新 关键 字 。 

结果 报告 和 日 志 采 用 html 格式 ,易于 阅读 。 

平台 、 应 用 无 关 , 可 以 用 于 测试 不 同 平台 上 的 不 同 应 用 。 

易于 扩展 ,提供 了 简单 的 测试 库 API, 用 户 可 以 使 用 Python 或 Java 自 定义 测试 库 。 
易于 集成 到 现 有 的 构建 工具 (持续 集成 工具 ) ,提供 了 命令 行 接口 和 基于 xml 的 输出 
xit. 

功能 全 面 ,支持 Selenium Web 测试 Java GUI jill iX iZ THF, Telnet, SSH 等 。 
支持 创建 数据 驱动 的 测试 用 例 。 

支持 变量 。 

提供 标签 以 分 类 和 选择 将 被 执行 的 测试 用 例 。 

易于 与 版 本 管理 集成 ,测试 套件 是 文件 和 目录 ,可 以 被 版 本 管理 系统 管理 。 


RF 附带 如 下 标准 库 : 测试 数据 


BuiltIn 一 一 包含 常用 的 关键 字 , 自 动 导 入 。 
Collections 包含 处 理 列表 和 字典 的 关键 字 。 RF 测试 框架 
DateTime 一 一 支持 创建 和 验证 日 期 和 时 间 。 
Dialogs 一 支持 暂停 测试 执行 ,便于 从 用 户 获 ише 
得 输入 。 
OperatingSystem 一 一 支持 执行 操作 系统 相关 M. 
的 各 种 任务 。 

Process 支持 执行 系统 进程 。 
Remote 一 一 远程 库 接口 ,没有 自己 的 关键 字 。 
Scereenshot 一 提供 捕获 和 存储 梨 面 屏幕 截图 kau dias 
的 关键 字 。 

String 一 一 操作 字符 串 , 验 证 字符 串 值 的 库 。 

Telnet 支持 连接 到 Telnet 服务 器 ,执行 Telnet 命令 。 
XML 一 一 验证 和 修改 XML 文件 的 库 。 


不 同 应 用 的 自动 化 测试 需要 相应 的 测试 库 , 例 如 ,有 如 下 的 测试 库 : 


使 用 Selenium 的 Web 自动 化 测试 库 。 

Selenium2Library 使 用 Selenium 2 的 Web 自动 化 测试 库 , 该 库 已 过 时 ,现在 应 
使 用 SeleniumLibrary, 

AutoltLibrary Windows GUI 自动 化 测试 库 。 

DatabaseLibrary 数据 库 测试 库 。 


SeleniumLibrary 
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* HTTPRequestLibrary HTTP 自动 化 测试 库 。 

使 用 Appium 的 移动 应 用 自动 化 测试 。 
详 见 http: //robotframework. org/ # libraries, 

RF 提供 了 如 下 内 置 工具 : 

* Rebot 一 一 生成 基于 XML 输出 的 日 志和 报告 。 

* Libdoc 生成 测试 库 和 资源 文件 的 关键 字 文档 。 

* Testdoc 生成 基于 Robot Framework 测试 用 例 的 HTML 文档 。 
* Tidy 一 一 清理 和 变更 Robot Framework 测试 数据 文件 的 格式 。 
RF 还 有 各 种 编辑 器 工具 ,例如 ， 

。 RIDE 一 一 独立 的 RF 编辑 器 。 

RF Eclipse 插件 。 

* Robot Plugin for IntelliJ IDEA—— RF IntelliJ IDEA 插件 。 

e Notepad++——Notepad++RF 支持 。 

详 见 http: //robotframework. org/ # tools. 

RF 支持 如 下 的 构建 工具 : 

* Jenkins plugin—— RF Jenkins 插件 。 

* Maven plugin 一 一 RF Maven 插件 。 

* Ant task 一 一 RF Ant 任务 。 

详 见 http: //robotframework. org/ # tools, 


6.3.2 RF 测试 环境 的 安装 


RF 测试 环境 的 安装 步 又 如 下 : 
。 安装 Python 。 

。 安装 Robot framework, 
安装 wxPython 2.8。 

安装 集成 开发 环境 RIDE。 
。 安装 Selenium Library。 


* AppiumLibrary 


* Eclipse plugin 


1. 安装 Python 


在 Python 官网 https://www. python. org/ 可 以 下 载 不 同 操作 系统 下 的 Python, DA 
Windows 为 例 ,下 载 python-2. 7. 14. msi。 然 后 双击 python-2. 7. 14. msi 开始 安装 ,如 图 6. 11 
所 示 。 

单 击 Next 按钮 ,可 以 指定 安装 目录 ,如 图 6. 12 所 示 。 

单 击 Next 按钮 ,可 以 定制 Python 的 安装 ,将 python. exe 增加 到 环境 变量 Path ,注意 
到 安装 了 pip 测试 套件 。pip 是 Python 提供 的 包 管理 工具 ,可 以 用 于 从 PyPIChttps:// 
pypi. org/) 安 装 Python 140 Ail fl Ж Python 软件 包 。PyPI 是 Python Package Index 的 
简称 ,利用 PyPI 可 以 查找 ,安装 ,发布 Python 软件 包 。 定 制 Python 的 安装 如 图 6. 13 所 示 。 
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Select whether to install Python 2.7.14 
for all users of this computer. 


© Install for all users 


© Install just for me (not avaiable on Windows Vista) 


python 
windows 


图 6.11 Python 安装 向 导 1 


27.14 Se 


Select Destination Directory 


Please select a drectory for the Python 2.7.14 files. 


СЎ Python27 ~ [uo (mew. 
d ү”, 
aD 


python 
windows 


JOb\Python27\ 


гаа раа) 


Р 6.12 Python 安装 向 导 2 


Customize Python 2.7.14 


Select the way you want features to be nstaled. 
ick on the icons in the tree below to change the 
way features wil be instaled. 


e 


Prepend D:\Python27\ to the system Path 


тт eie eur armies 
puthon WORD Dr 
f Thi feature requires 0KB on your hard drive. | 
windows 
en) (Advanced) («mk J meto ) (нка ) | 


图 6.13 Python 安装 向 导 3 
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2. 安装 Robot framework 
在 命令 行 输入 如 下 命令 : 


pip install robotframework 


结果 如 图 6.14 所 示 。 


robotframewor 
Downloading https://fil 


Installing collected package bot framework 
Running setup.py install for robotframework ... done 
sfully installed robotframework-3.8.3 
re using pip version 9.0.3, however ve 


hould consider upgrading via the ’pyth ip install 


rs\lenovo> 


图 6.14 安装 robot framework 


如 需 升 级 pip, 可 以 在 命令 行 输入 如 下 命令 : 


Python -m pip install - upgrade pip 


结果 如 图 6. 15 所 示 


:\Users\Administrator>python -m pip install --upgrade pip 
ollecting pip $ i 
ding https: //files.pythonhosted.org/packages/0f/74/ecd13431bcc456ed390b) 
0 0 wh] 


00:02 
eta 0:00:02 


图 6.15 升级 pip 


如 需 查 看 安装 的 RF 版 本 ,可 以 使 用 如 下 的 命令 : 


Pybot — version 


命令 运行 结果 如 图 6. 16 所 示 


in 
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Installing collected packag pip 
ing installation: pip 9 
pip-10.0.1 


:\Users\Administrator>pybot - 
Robot Fram k 3 4 (Python .14 оп win32) 


ers\Administrator 


图 6.16 查看 安装 的 RF 版 本 


3. 安装 wxPython 2.8 


wxPython 是 Python 语言 的 跨 平台 GUI 工具 ,RF RIDE 编辑 器 依赖 于 wxPython。 


在 网 址 https://sourceforge. net/projects/wxpython/files/wxPython/2. 8. 12. 1/ 下 载 


2 > л 


win32-unicode-2 


wxPython2 . 12. 1-ру27. exe 或 wxPython2. 8-win64-unicode-2, 8. 12. 


Y wxPython2. 8-win32 


1-py27. exe.35 17 wxPython2, 8-win64-unicode 


unicode-2. 8. 12. 1-py27. exe。 出 现 如 图 6. 17 所 示 的 画面 


12. 1-py 


08) Setup - wxPython2.8-unicode-py27 


Select Destination Location 
Where should wxPython2.8-unicode-py27 be installed? 


| setup wa instal wxeython2.8-unicode-py27 into the folowing folder. 


To continue, dick Next. If you would like to select a different folder, dick Browse. 


D:\Python27\Liblsitel packages [ Browse... 


At least 0.7 MB of free disk space is required. 


m ea 


图 6.17 安装 wxPython?2. 8 向 导 1 


单 击 Next 按钮 , 按 提示 完成 安装 ,安装 完成 后 的 画面 如 图 6. 18 所 示 。 
值得 注意 的 是 ,从 wxPython4. 0 开始 ,可 以 从 https: / / pypi. python. org/pypi/wxPython 下 
载 wxPython。 因 此 ,也 可 以 用 如 下 的 命令 安装 wxPython: 


pip install — U wxPython 
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}Ў setup - wePython2.8-unicode-py27 RR e 


Completing the 
wxPython2.8-unicode-py27 Setup 
Wizard 


Setup has finished instaling wxPython2.8-unicode-py27 on 
your computer, 
Click Finish to exit Setup. 
[Г] Mew README.van32.txt 
V] Compile Python .py fies to .pyc 
V] Create batch files for tool scripts 


[ве |] 


图 6.18 安装 wxPython2. 8 向 导 2 


4. 安装 集成 开发 环境 RIDE 
使 用 如 下 的 命令 安装 编辑 器 RIDE: 


pip install robotframework — RIDE 


安装 完成 后 ,在 Python 的 Scripts 目录 中 增加 了 文件 RIDE. py. 
可 以 用 命令 启动 RIDE ,例如 


cd D:\python27\scripts 
Python RIDE. py 


RIDE 启动 成 功 后 的 界面 如 图 6. 19 所 示 。 


File Edit Tools Navigate Macros Help 
oobPHBECT о 
IË External Resources Edt | Text Edt | Run | Release Notes SEX 


Welcome to use RIDE version 1.5.2.1 
| Thank you for using the Robot Framework IDE (RIDE). 


Visit RIDE on the web: 
* RIDE project page on github 
* Installation instructions 
* Release notes 


| Release notes for 1.5.2.1 
| 


р wa Priority Summary 
[Issue 1577 [bug [critical [RIDE 1.5.2 does not work with wxPython 2.8.12.1 


Altogether 1 issues. 


| = 


图 6.19 RIDE 启动 成 功 后 的 界面 
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5. 安装 selenium Library 
在 命令 行 输入 如 下 命令 ， 
pip install robotframework — seleniumlibrary 


命令 运行 结果 如 图 6.20 所 示 。 


Suppres: ored output 


sers\Administrator>pip list 


iumlibrai 


Se/robot 


obot framework-seleniumli 
nhosted. org/pack bc/17164fd471ccdfOdf3a9 
Tenium 2 y ne-any.whl (9 


s eta 0:00 
eta 0 1 
a 0:00:1 


图 6.20 安装 selenium Library 


6.3.3 RF Selenium 测试 示例 演示 


WebDemo 是 RF 官方 提供 的 一 个 RF Selenium 测试 示例 ,其 中 包含 了 一 个 用 Python 
编写 的 简单 的 Web 应 用 demoapp 
下 载 WebDemo, 地 址 为 https: //bitbucket. org/robotframework/webdemo/downloads/ „ 
解压 文件 WebDemo-20150901. zip, 例 如 ,解压 到 c:\Python27\workspace。 
输入 如 下 命令 ,启动 demoapp 
cd C:\Python27\workspace\WebDemo\demoapp 
Python server.py 
在 浏览 器 地 址 栏 输入 http://localhost:7272/ ,输入 用 户 名 (demo) 和 密码 (mode), 可 以 
登录 成 功 。 
RIDE 中 演示 WebDemo 的 步骤 如 下 : 
单 击 File>Open Directory, 打 开 目 录 
。 浏览 测试 用 例 , WebDemo 使 用 了 Selenium2Library 测试 库 ,在 资源 文件 resource. 
robot 中 修改 导入 的 库 为 SeleniumLibrary。 
。 根据 所 用 的 浏览 器 修改 变量 $ (BROWSER) 的 值 ,对 于 Firefox 浏览 器 .Google 浏览 
器 和 下 浏览 器 ,$ {BROWSER) 的 值 分 别 为 Firefox, Chrome 和 Internetexplorer。 
* 将 浏览 器 的 驱动 放 在 PATH 指定 的 目录 中 ,Firefox 浏览 器 为 geckodriver; Google 
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浏览 器 为 chromedriver; IE 浏览 器 为 IEDriverServer。 


* 执行 测试 , 按 FS 键 。 
。 查看 测试 报告 和 日 志 , 单 击 Run 标签 页 中 的 Report 或 Log 按钮 。 


通过 WebDemo 测试 示例 ,可 以 熟悉 RF Selenium 测试 的 基本 方法 。 


RIDE 的 基本 操作 如 下 : 
(1) 创建 测试 项 目 , 单 击 File>New Project 菜单 项 ,如 图 6. 21 所 示 。 


Parent Directory C:\Python27\workspace 
«oo oom 


Сое] ( cece J 
图 6.21 在 RIDE 中 创建 测试 项 目 


测试 项 目的 类 型 可 以 是 文件 或 目录 ,选择 文件 时 ,测试 项 目 中 只 包含 测试 用 例 ; 选择 目 
录 时 ,测试 项 目 可 以 包含 测试 套件 和 测试 用 例 。 建 议 选择 目录 类 型 ,这 样 更 便于 组 织 测试 用 


例 。 可 以 选择 robot、txt、tsv 或 html 格式 。 
(2) 右 击 测试 项 目 , 单 击 New Suite 菜单 项 ,如 图 6.22 Bros 。 


iB Edit Tools Navigate Macros Help 
CeomebBECT vo . 


E 


6.22 ”新 建 测试 套件 


NY 
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测试 套件 也 可 以 选择 文件 或 目录 类 型 ,此 处 选择 文件 类 型 。 
(3) 创建 测试 用 例 , 右 击 测试 套件 , 单 击 New Test Case 菜单 项 。 新 建 两 个 测试 用 例 
valid login 和 invalid_login, 如 图 6. 23 所 示 。 


File Tools Navigate Macros Help 
= p EP e J E K: T: › 
re E Test 


La 
ЕЁ External 


mc 
Name vaid_oon ] 
Give a name for the new test case. 


| [ ж J( сте) 


6.23 ”新 建 测试 用 例 
(4) 创建 资源 文件 , 右 击 测试 项 目 , 单 击 New Resource 菜单 项 ,结果 如 图 6. 24 所 示 。 
— XK————"——— A" 


Name resource | Format 
parent Drectony A ° 07 OM Оту Ом 
Created Path EEE 


Сек] emer | 


图 6.24 新 建 资 源 文件 


可 以 在 资源 文件 中 导入 测试 库 、 定 义 一 些 常量 创建 自 定义 关键 字 等 。 

CD 在 资源 文件 中 添加 测试 库 ,在 资源 文件 编辑 器 中 单 击 Library 按钮 ,如 图 6. 25 所 示 。 

还 可 以 在 测试 项 目 或 测试 套件 编辑 器 中 添加 测试 库 ,测试 库 提供 特定 应 用 的 关键 词 。 

© 在 资源 文件 中 增加 常量 ,在 资源 文件 编辑 器 中 , 单 击 Add Scalar 按钮 ,常量 是 有 确定 
值 的 ,如 图 6. 26 所 示 。 


WebDemo 的 资源 文件 中 定义 了 如 图 6. 27 所 示 的 常量 。 
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Гезе) Tet Eat | un | nn 


Resource 

Source. _C:\Python27\workspace\ Test'yesource.robot. 

Import Name Д. Library » Adá Import 

Library iuf) Name. = (Browse) ===] 
Aus m L mwa } 
ad — | 
‘Comment трека Heb J 
Give name, optional arguments and optional alias of the library to import. 
Separate with a pipe character like ‘arg 


arguments. 11002. 
(Alias can be used to import same library multiple times with different names. 


[ ж ][ ока J 


图 6.25 在 资源 文件 中 添加 测试 库 


Геак Text Edt | Run | 1 
Resource 


Variable 
SISERVER] 
SIBROWSER) 
SIDELAY) 


图 6.26 在 资源 文件 中 增加 常量 


Variable Value Comment 
S{SERVER) localhost:7272 

S(BROWSER) InternetExplorer 

S{DELAY} 0 

SIVALID USER) demo 

SIVALID PASSWORD) mode 

SILOGIN URL) http;//S(SERVER)/ 

S{WELCOME URL) — http://S(SERVER)/welcome.html 

S{ERROR URL} http://${SERVER}/error.html 


6.27 WebDemo 的 资源 文件 中 定义 的 常量 


© 在 资源 文件 中 增加 自 定义 关键 字 , 右 击 资源 文件 , 单 击 New User Keyword 菜单 项 ， 
在 出 现 的 界面 输入 关键 字 名 称 ,用 户 关键 字 由 一 组 标准 关键 字 (RF 内 置 关 键 字 和 测试 库 关 
键 字 统称 为 标准 关键 字 ) 组 成 ,如 图 6. 28 所 示 。 

@ 编辑 自 定义 关 键 字 ,在 关键 字 编辑 器 中 可 以 增加 关键 字 , 按 F5 键 可 以 搜索 关键 字 ， 
包括 可 以 搜索 RF 内 置 关 键 字 .SeleniumLibrary 提供 的 关键 字 和 用 户 定义 的 关键 字 。 限 于 
篇 幅 , 本 书 不 对 这 些 关 键 字 做 详细 介绍 。 编 辑 自 定义 关键 字 如 图 6. 29 所 示 。 

(5) 在 测试 套件 中 引用 资源 ,测试 用 例 中 用 到 的 资源 需要 在 测试 套件 里 直接 引用 ,如 
图 6. 30 所 示 。 
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图 6.28 在 资源 文件 中 增加 自 定义 关键 字 


edt | Text Ede | Run | 


== Е 
Add Cookie Soleriom2— Adds a cookie to your curent sess. [3 
Add Location Strategy Selenium2... Adds a custom location strategy. 

Alert Should Be Present Selenium2.. Verifies that an alert is prevent and, — 
Alert Should Not Be Present Selenium2.. Verifies that no alert is present. 

Assign Id To Element Selenium? Assigns temporary "id" to element — 


Mame: а Cookie 
Source: SeenumQLbrary «test bray> 
Arguments: { name | value | path=Hone | ботап «None | secure=None | expry=None ] 


Adás à cookie to your current sesson. 
nane and value are requéed, path, domain, secure and expiry are optional Expty supports = 


BRIDE - Gherkin Login ее = 
= os n 
Кш; Gherkin Login 
В & Vale toon Source CHPvéhon7 workspace WebDemollon. testslghern. log sobot 


4B Browser s opened to bon page 
S use "метатеў' bos Р 


| vd toon Import Name/Path Arguments Соте Add import 
ри == == [um] 
日 g Demoanp 

id exer Resources Сама) 


cum Смак] 

= са | es 

comment 

EINE — 
Cx) 


图 6. 30 在 测试 套件 中 引用 资源 


| Edit Text Edt | Run | 
Valid Login 


@ Browser 5 opened to login page 
Š$ User Susemamej logs n wth ра 


图 6.31 编辑 测试 用 例 
(7) 执行 测试 , 单 击 Run 标签 页 中 的 Start 按钮 或 按 F8 键 ,如 图 6.32 所 示 。 


en ЖОЕ 
User "$(username)" logs in "| 
майа Loon. E] Only run tests with these tags 


critical tests, 8 passed, 0 failed 
ts total, B passed. 0 failed 


WebDeno 
8 critical tests, 9 passed, D failed 


8 tests total. B passed 


Output: c:\users\lenovo\appdata\local\tenp\RIDEnhulgr d\output xnl 
D 


4 
20180513 23:01:23.316 : INFO : Typing text '' into text field "password field' 
INFO | Clicking button "login button 
Current location is "http //localhost:7272/error htm 


2018013 2301.5 i INO. Sage title ds "age" 
End: jebDeno.Login Tests. Invalid Login Empty Username And Password 


ing test 
Starting į en Login Tests Valid Login Valid Login 
þrovser, ‘InternetExplorer’ to base url 'httF 


Opening 

Page title is ‘Login Page" 

Typing text ‘demo’ into text field 'username field’ [J 
Typing text 'aode' into text field 'password field’ 


20180513 23:01: H Clicking button 'login button" 
+ 


6.32 ”执行 测试 


(8) 查看 测试 日 志 , 单 击 Run 标签 页 中 的 Log 按钮 ,如 图 6.33 所 示 。 
(9) 查看 测试 报告 , 单 击 Run 标签 页 中 的 Report 按钮 ,如 图 6. 34 所 示 。 
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Aa ey »Axe ma sm Im wm |w — D x 
[€ © € fr © file///C:/Users/lenovo/AppData/Local/Temp/RIDEnhulqr-d/log.htmi tv 
q B С Robot Framework User Guide х | Œ WebDemo Test Log B сэ 
|. WebDemo Test Log 20180513 230138 GMT-0800 

4 minutes 20 seconds ago 


Ed test statistics 


8 0 44 ww 
All Tests 8 8 | 0 44 — 
8 8 | 0 a — 
WetOemo.Login Tests | 8 8 | O 000051 ww 
WebDemo.Login Tests. Gherkin Login | 1 1 | 0 000011 w 
WebDemo. Logn Tests. Invalid Login 6 6 | 0 000029 ww 
WebDemo. Logn Tests. Valid Login 1 1 l 0 000011  m—-— 
Test Execution Log 
= ШЗ моето 00:00:51.232 
Full Name: WebDemo 
Source: c JWebDemo 
Start / End / Elapsed: 20180513 23:00:46 701 / 20180513 23:01:37 933 / 00:00:51 232 
ex Status: Beentical test, В passed. 0 failed 
A test total nassed (failed = 
图 6.33 查看 测试 日 志 
Em >A хе wa 5m IA wm |w — D x 
|* © € ў © fie///C/Users/lenovo/AppData/Local/Temp/RIDEnhulqr.d/report.html $v 


q HB С Robot Framework User Guide x | Œ WebDemo Test Log WebDemo Test Report x|+) 


All tests passed 
20180513 23:00:46.701 
20180513 23:01:37 933 
00:00:51.232 

log html 


WetDemno. Login Tests Invalid Login 
‘WebDemo. Login Tests. Valid Login. 


图 6. 34 查看 测试 报告 
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6.4 黑 盒 测试 技术 


除了 第 4 章 介 绍 的 白 盒 测 试 技术 以 外 ,还 有 一 种 经 典 的 设计 测试 用 例 的 技术 , 即 黑 盒 测 
试 技术 。 利 用 黑 盒 测 试 技术 ,可 以 用 尽 可 能 少 的 测试 用 例 ,对 软件 可 能 出 现 的 各 种 情况 进行 
测试 ,避免 了 出 现 * 应 该 测试 的 情况 没有 测试 ,不 必 测试 的 情况 反而 测试 了 ”的 现象 ,从 而 充 
分 利用 提供 的 资源 进行 相对 有 效 的 测试 。 


6.4.1 等 价 类 划分 


可 以 将 软件 或 系统 的 输入 分 成 不 同 的 组 ,对 于 同一 个 组 的 输入 ,软件 或 系统 应 该 有 相似 的 
表现 行为 ,就 好 像 系统 是 以 相同 的 方式 对 这 些 输入 值 进 行 处 理 的 。 通 常 ,数据 可 以 分 成 两 种 类 
型 的 数据 : 有 效 数 据 ( 即 应 该 被 系统 接受 的 数据 ) 和 无 效 数据 ( 即 应 该 被 系统 拒绝 的 数据 ) 。 
此 ,总 是 可 以 将 数据 分 成 两 个 等 价 类 : 有 效 数 据 等 价 类 和 无 效 数据 等 价 类 。 一 般 地 ,还 会 对 无 
效 等 价 类 做 进一步 划分 ,将 其 划分 为 若干 个 无 效 等 价 类 。 等 价 类 划分 也 可 以 基于 输出 、 内 部 
值 .时 间 相关 的 值 ( 例 如 ,在 事件 之 前 或 之 后 ) 以 及 接口 参数 (在 集成 测试 阶段 ) 等 进行 。 可 以 设 
计 测试 用 例 来 覆盖 所 有 有 效 和 无 效 等 价 类 。 等 价 类 划分 可 以 应 用 在 所 有 测试 级 别 上 。 

通过 应 用 等 价 类 划分 技术 ,能够 实现 输入 覆盖 和 输出 覆盖 。 它 同样 适用 于 人 为 的 输入 、 
通过 系统 接口 的 输入 以 及 集成 测试 中 的 接口 参数 。 

使 用 等 价 类 划分 法 设计 测试 用 例 的 一 般 步骤 是 : 首先 将 测试 数据 划分 为 若干 等 价 类 ， 
然后 在 每 一 类 中 选择 一 个 或 若干 个 数据 作为 测试 用 例 数据 。 

例 6.1 图 书 管理 系统 对 用 户 登录 的 需求 说 明 是 : 输入 正确 的 用 户 名 和 密码 ,能 登录 成 
功 ; 输入 的 用 户 名 是 错误 的 时 候 ,提示 * 用 户 不 存在 并 要 求 重新 输入 用 户 名 ; 在 用 户 名 是 
正确 的 情况 下 ,输入 的 密码 是 错误 的 时 候 , 提 示 * 密 码 错误 ”, 人 允许 重 新 输入 密码 (最 多 三 次 ) 。 

假定 有 一 个 正确 的 用 户 名 是 “*J201805”, 密 码 是 “Jjj051802”。 可 以 将 输入 数据 划分 为 ; 

。 有 效 等 价 类 一 一 所 有 正确 的 用 户 名 和 密码 组 成 的 集合 。 

。 用 户 名 错误 等 价 类 一 一 符合 用 户 名 错误 的 用 户 名 组 成 的 集合 。 

。 用 户 名 正确 但 密码 错误 等 价 类 一 一 符合 用 户 名 正确 但 密码 错误 的 用 户 名 和 密码 组 

成 的 集合 。 

使 用 等 价 类 划分 法 可 以 设计 如 表 6. 1 所 示 的 测试 用 例 。 

表 6.1 用 等 价 类 划分 法 设计 的 测试 用 例 集 


序号 用 户 名 密码 期 望 结 果 实际 结果 备注 
1 1201808 73051802 | 能 够 成 功 登录 
2 J291808 提示 “用 户 不 存在 ” 假定 没有 用 户 J291808 
3 1201808 ji051802 | 提示 “密码 错误 ” 


6.4.2 边界 值 分 析 


测试 用 例 的 设计 目标 是 尽 可 能 把 最 有 可 能 发 现 错误 的 情况 都 测试 到 。 在 各 等 价 类 划分 
的 边界 通常 更 可 能 出 现 不 正确 的 行为 ,因此 边界 就 是 测试 比较 可 能 发 现 缺陷 的 区 域 。 每 个 
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划分 的 最 大 值 和 最 小 值 就 是 它 的 边界 值 。 有 效 部 分 的 边界 就 是 有 效 边界 值 , 无 效 部 分 的 边 
界 就 是 无 效 边界 值 。 测 试 的 设计 应 当 既 覆盖 有 效 边界 值 又 覆盖 无 效 边界 值 。 在 设计 测试 用 
例 时 ,应 该 将 每 个 边界 值 包含 在 测试 用 例 中 。 

边界 值 分 析 可 以 应 用 于 所 有 的 测试 级 别 。 这 种 方法 的 应 用 相对 简单 ,发 现 缺陷 的 能 力 
也 比较 高 ,同时 ,详细 的 规格 说 明 对 边界 值 分 析 很 有 帮助 。 

边界 值 分 析 技术 通常 被 认为 是 等 价 类 划分 技术 或 其 他 黑 盒 测试 设计 技术 的 一 种 拓展 。 
它 可 以 应 用 在 用 户 从 屏幕 输入 的 等 价 类 中 ,也 可 以 应 用 在 如 时 间 段 的 范围 (如 超时 ,对 事务 
处 理 速度 的 需求 ) 或 表 的 边界 (如 表 大 小 为 256X256) 等 方面 。 

使 用 边界 值 分 析 法 设计 测试 用 例 的 一 般 步 又 是 : 首先 找 出 各 种 边界 值 ,然后 以 边界 值 
作为 测试 用 例 数据 。 

例 6.2 图 书 管理 系统 对 用 户 登 录 的 需求 说 明 是 : 输入 正确 的 用 户 名 和 密码 ,能 登录 
成 功 ; 输入 的 用 户 名 是 错误 的 时 候 , 提 示 “ 用 户 不 存在 ”, 要 求 重新 输入 用 户 名 ; 在 用 户 名 是 
正确 的 情况 下 ,输入 的 密码 是 错误 的 时 候 , 提 示 “ 密 码 错 误 ”, 允许 重 新 输入 密码 (最 多 三 次 )。 

图 书 管理 系统 对 用 户 登 录 的 详细 设计 要 求 是 : 密码 6 一 10 个 字符 ,要 求 包含 大 写字 母 、 
小 写字 母 和 数字 。 

使 用 边界 值 法 可 以 为 图 书 管理 系统 用 户 登 录 设计 如 表 6. 2 所 示 的 测试 用 例 。 


表 6.2 使 用 边界 值 法 设计 的 测试 用 例 集 


序号 | HP 密码 期 望 结果 实际 结果 备注 
1 J201808 Jj051802 | 能 够 成 功 登录 
Ë J291808 提示 “用 户 不 存在 ” 假定 没有 用 户 J291808 
” 提示 “密码 错误 一 次 ”, 可 以 
3 1201808 jj051801 重新 输入 密码 
š 提示 “密码 错误 二 次 ”, 可 以 
4 J201808 jj051802 重新 输入 密码 
P 提示 “密码 错误 三 次 ”, 不 能 
5 J201808 jj051803 BARANE 
: 提示 “密码 长 度 为 6 一 10 个 
6 1201808 13123 字符 ” 
7 | 201808 |Jj123456789 ашады кюр 


6.4.3 决策 表 测 试 


自从 20 世界 60 年 代 初 以 来 ,决策 表 就 一 直 被 用 于 分 析 和 表示 复杂 他 辑 关系 。 决 策 表 
能 够 将 复杂 的 问题 按照 各 种 可 能 情况 全 部 列举 出 来 ,简单 明了 并 避免 遗漏 。 因 此 ,利用 决策 
表 设 计 测 试用 例 是 一 种 很 好 的 方法 。 

决策 表 主要 由 四 个 部 分 组 成 : 条 件 桩 动作 桩 、 条 件 项 和 动作 项 ,如 图 6.35 Brom. 

条 件 桩 : 列 出 了 问题 的 所 有 条 件 。 

动作 桩 : 列 出 问题 可 能 采取 的 所 有 操作 。 

条 件 项 : 条 件 的 取 值 。 
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AA 


规则 1 规则 2 规则 3 规则 N 


规 
则 


图 6.35 决策 表 的 四 个 主要 组 成 部 分 


动作 项 : 操作 的 取 值 。 

规则 : 条 件 项 和 动作 项 的 组 合 。 

用 决策 表 测 试 方法 设计 测试 用 例 的 要 求 是 ,设计 足够 多 的 测试 用 例 ,使 得 测试 用 例 集 能 
够 覆盖 决策 表 的 每 一 条 规则 。 

例 6.3 图 书 管理 系统 借 书 流程 如 图 6. 36 所 示 。 


MARBRE a 
号 和 书号 


ОШ шл “ШЕ es 
tici ska 错误 四? 


E - м 
pro M 
А 


a 


Y 


书信 息 失败 !” 


图 6.36 图 书 管理 系统 借 书 流程 图 
根据 图 书 管理 系统 借 书 流程 图 , 列 出 决策 表 , 如 表 6. З 所 示 。 
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表 6.3 图 书 管理 系统 借 书 决策 表 


编 号 1 2 3 4 5 
借 书 卡号 和 书号 都 正确 吗 ? x Y X N N 
ARE 借 书 卡号 错误 吗 ? x x x Y N 
更 新 可 借 数 量 成 功 吗 ? Y Y N x x 
记录 借 书 信息 成 功 吗 ? Y N x x X 
借 书 成 功 У 
显示 “记录 借 书信 息 失败 1” У 
IERE | 显示 “更 新 可 借 数 量 失 败 !” У 
显示 “ 借 书 卡 号 错误 1” У 
显示 “书号 错误 !” / 
设计 测试 用 例 集 ,覆盖 表 中 每 一 条 规则 ,如 表 6.4 所 示 。 
R64 借 书 测试 用 例 集 
序号 | 借 书 卡号 | ”书号 | 可 借 数量 期 望 结果 实际 结果 备注 
1 | J201801 | T051802 2 借 书 成 功 
显示 “记录 借 书 信息 
2 | T 
2 | J20180 051802 3 per 
显示 “更 新 可 借 数 量 该 读者 借 书 数量 已 达 
3 | J201801 | To51802 0 =” 最 大 ,不 能 再 借 书 。 
4 | J291808 | To51802 显示 “ 借 书 卡号 错误 !” 假定 没有 用 户 J291808 
5 | J201808 | T951802 显示 “书号 错误 1” 假定 没有 图 书 T951802 
6.4.4 状态 转换 测试 
状态 转换 测试 是 一 种 用 于 测试 有 限 状 态 机 ?的 黑 盒 测试 技术 ,有 限 状 态 机 是 这 样 的 系 


统 , 它 由 有 限 个 状态 组 成 ,从 初始 状态 到 终止 状态 的 转换 是 依据 转换 规则 完成 的 。 有 限 状态 
机 可 以 用 UML 状态 图 表示 。 

根据 系统 当前 的 情况 或 先前 的 情况 (如 系统 先前 的 状态 ) ,系统 可 能 会 产生 不 同 的 响应 。 
在 这 种 情况 下 ,系统 的 特征 可 以 通过 状态 转换 图 来 表示 。 测 试 员 可 以 根据 系统 的 状态 .状态 
间 的 转换 、 触 发 状态 变化 (转换 ) 的 输入 或 事件 以 及 从 状态 转换 导致 的 可 能 的 行动 来 进行 测 
试 。 被 测试 系统 或 对 象 的 状态 是 独立 的 、 可 确认 的 ,并 且 数 量 是 有 限 的 。 

一 个 状态 表 描 绘 了 状态 和 输入 之 间 的 关系 ,并 能 显示 可 能 的 无 效 状态 转换 。 

设计 的 测试 可 以 覆盖 一 个 典型 的 状态 序列 ,或 覆盖 每 个 状态 ,或 执行 每 个 状态 转换 ,或 
执行 特定 顺序 的 状态 转换 或 测试 无 效 的 状态 转换 。 

状态 转换 测试 方法 在 嵌入 式 软件 行业 和 自动 化 行业 使 用 较 多 。 但 是 这 个 技术 同样 也 适 
用 于 有 特定 状态 的 业务 对 象 的 建 模 或 测试 具有 对 话 框 状态 转换 流 的 系统 (例如 互联 网 应 用 
或 业务 场景 ) 。 

例如 ,在 图 书 管理 系统 中 ,我 们 设计 了 图 书 的 状态 图 ,如 图 6.37 所 示 。 

将 状态 图 转换 为 状态 表 , 如 表 6. 5 所 示 。 
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预 的 转借 出 [预约 转借 出 是 否 成 功 ?] . 
nh] 
图 6.37 图 书 状态 图 
KOS 图 书 状态 表 
序号 1 2 3 4 5 6 
开始 状态 EAE ”| 可 借 图 书 | 借 出 图 书 | aus | ds | 预约 图 书 
输入 条 件 | 编目 办 理 借 书 ”| 办 理 还 书 | 办 理 预约 — | 预约 转借 由 | 取消 预约 
ынан | 更 新 图 书 状 | 更 新 图 书 状 | 更 新 图 书 状 | 更 新 图 书 状 | 更 新 图 书 状 | 更新 图 书 状 
态 为 可 借 | 态 为 借 出 ”| 态 为 可 借 | 态 为 预约 | 态 为 借 出 。 | 态 为 借 出 
结束 状态 | 可 借 图书 ”| 借 出 图 书 ”| 可 借 图 书 ”| 预约 图 书 ”| 借 出 图 书 ”| 取消 预约 
依据 状态 表 设 计 测试 用 例 集 ,如 表 6. 6 所 示 。 
表 6.6 图 书 管理 系统 主要 功能 测试 用 例 集 
= 操作 步骤 描述 期 望 结果 & gx 
以 图 书 管理 员 身 份 登录 系统 
查询 新 进 图 书 
| 对 新 进 图 书 进行 编目 能 够 查询 到 刚 完成 编目 的 
打印 图 书 标 和 图 书 
以 读者 身份 登录 系统 
查询 刚 完成 编目 的 图 书 
以 图 书 管理 员 身 份 登录 系统 HR EH ama PER 
2 扫描 图 书 编码 出 , 借 书 读者 、 应 还 日 期 等 
显示 读者 借 书 信息 jm 
ee are 查询 图 书 时 显示 图 书 在 馆 | 本 图 书 没有 被 
3 扫描 图 书 编码 pm “в 
显示 读者 还 书信 息 
БЕТТЕГЕН) = 
4 查询 图 书 显示 图 书 已 借 出 oo 
预约 图 书 
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续 表 
序 号 操作 步骤 描述 期 望 结果 & dg 
以 图 书 管理 员 身 份 登录 系统 
eine 查询 图 书 时 显示 图 书 已 借 
5 күй нара MID sm 本 图 书 被 预约 
查询 读者 预约 图 书信 息 к 
将 预约 转 为 借 出 
以 读者 身份 登录 系统 查询 预约 图 书信 息 时 ,取消 
6 查询 预约 图 书 预约 的 图 书 不 再 出 现在 预约 
取消 预约 图 书 列表 中 


6.4.5 基于 用 例 的 测试 


用 例 图 是 UML 中 的 描述 用 户 与 系统 交互 的 UML 图 , 它 表 达 了 用 户 对 系统 的 需求 。 
利用 用 例 来 设计 测试 用 例 的 技术 被 称 为 基于 用 例 的 测试 。 

可 以 通过 用 例 来 设计 测试 。 用 例 描述 了 参与 者 (用 户 或 系统 ) 之 间 的 相互 作用 ,并 从 这 
些 交互 产生 一 个 从 系统 用 户 或 客户 的 角度 所 期 望 和 能 观察 到 的 结果 。 通 常 可 以 在 抽象 层 
(业务 用 例 , 不 受 技 术 限 制 . 业 务 流程 层面 ) 或 系统 层 ( 系 统 功能 层面 的 系统 用 例 ) 来 描述 用 
例 。 每 个 用 例 都 有 测试 的 前 置 条 件 ,这 是 用 例 成 功 执行 的 必要 条 件 。 每 个 用 例 结束 后 都 存 
在 后 置 条 件 , 这 是 在 用 例 执行 完成 后 能 观察 到 的 结果 和 系统 的 结束 状态 。 用 例 通常 有 一 个 
主场 景 ( 即 最 有 可 能 发 生 的 场景 ) 和 可 选 场景 。 

用 例 以 过 程 流 的 形式 描述 了 系统 最 可 能 使 用 的 情况 ,因此 从 用 例 中 得 到 的 测试 用 例 是 
发 现 系统 在 实际 使 用 环境 中 可 能 遇 到 的 缺陷 的 最 有 效 的 方式 。 用 例 非 常 有 助 于 设计 用 户 / 
客户 参与 的 验收 测试 ; 也 可 以 帮助 发 现 由 于 不 同 组 件 之 间 的 相互 作用 和 相互 影响 而 产生 的 
集成 缺陷 ,这 是 在 单个 的 组 件 测试 中 是 无 法 发 现 的 。 从 用 例 中 设计 测试 用 例 可 以 和 其 他 基 
于 规格 说 明 的 测试 技术 结合 起 来 使 用 。 

下 面 以 图 书 管理 系统 中 的 一 个 简单 用 例 图 一 一 还 书 用 例 图 ( 见 图 6. 38) 为 例 ,介绍 基于 
用 例 的 测试 技术 。 
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图 6.38 还 书 用 例 图 
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依据 图 6. 38 ,可 以 设计 测试 用 例 集 ,如 表 6. 7 所 示 。 
表 6.7 还 书 测试 用 例 集 


序号 操作 步骤 描述 期 望 结果 备注 
以 图 书 管理 员 身 份 登录 系统 
1 | 扫描 图 书 编码 查询 图 书 时 显示 图 书 在 馆 (可 借 ) ме 
显示 读者 还 书信 息 ЕШ 
以 图 书 管理 员 身份 登录 系统 
, Bamsan 查询 图 书 时 显示 图 书 在 馆 (可 借 ) | 本 图 书 没有 被 预 
收缴 罚款 罚款 记录 中 增加 了 罚款 信息 ажа 
显示 读者 还 书信 息 
以 图 书 管理 员 身份 登录 系统 
扫描 图 书 编码 . Е 
，。 | 显示 读者 还 书信 息 te н T 本 图 书 被 预约 、 
给 预约 读者 发 送 可 借 通 知 nh ыц БЕРҮ 
查询 读者 预约 图 书信 息 
将 预约 转 为 借 出 
以 图 书 管理 员 身 份 登录 系统 
oo 查询 图 书 时 显示 图 书 已 借 出 , 借 书 
"E eem 读者 ,应 还 日 期 等 信息 本 图 书 被 预约 、 
aum 罚款 记录 中 增加 了 罚款 信息 有 请 期 
给 预约 读者 发 送 可 借 通知 masa esa 
查询 读者 预约 图 书信 息 
将 预约 转 为 借 出 


尽管 状态 转换 测试 和 基于 用 例 的 测试 都 使 用 了 UML 图 (状态 图 和 用 例 图 ) ,但 是 ,它们 
与 基于 模型 的 测试 是 不 同 的 。 基 于 模型 的 测试 是 建立 测试 模型 (有 限 状态 机 模型 .UML 测 
试 模型 和 马尔 可 夫 链 等 ) ,然后 利用 工具 自动 生成 测试 用 例 。 状 态 转 换 测试 和 基于 用 例 的 测 
试 是 依据 软件 设计 的 UML 图 (状态 图 和 用 例 图 ) 人 工 设 计 测 试用 例 。 


Ges 


任务 1: 安装 Selenium IDE, 记录 安装 过 程 , 编 写 安装 说 明 书 。 

任务 2: 在 Eclipse 中 用 Java 编写 Selenium 测试 代码 ,对 用 户 登录 功能 进行 测试 , 写 出 
Java 编写 Selenium 测试 代码 的 一 般 步骤 ,并 附 代码 示例 。 

任务 3: 安装 Robot Framework + Selenium 测试 环境 ,记录 安装 过 程 ,编写 安装 说 
明 书 。 

任务 4: 将 RF 官方 提供 的 RF Selenium 测试 示例 WebDemo 中 的 自 定义 关键 字 修 改 为 
中 文 , 写 出 RIDE 中 演示 WebDemo 的 步骤 。 


本 章 主 要 内 容 
性 能 测试 简介 
性 能 测试 工具 
JMeter 演练 


12306 火车 票 订 票 网 站 ,在 高 峰 时 日 单 击 量 超过 10 亿 次 ,因此 ,系统 对 并 发 处 理 提出 了 
更 高 的 要 求 , 显 然 , 我 们 不 可 能 组 织 10 亿 人 测试 这 个 系统 。 因 此 ,只 能 借助 性 能 测试 工具 模 
拟 大 量 用 户 使 用 这 个 系统 。 模 拟 场景 与 真实 场景 不 可 能 完全 相同 ,这 正 是 进行 性 能 测试 的 
难点 所 在 。 

本 章 首 先 介绍 性 能 测试 的 基本 知识 ,然后 介绍 性 能 测试 工具 JMeter 的 使 用 方法 。 


Bi 什么 是 性 能 测试 


软件 测试 早期 ,人 们 关注 更 多 的 是 软件 的 功能 测试 , 随 着 软件 技术 的 发 展 和 软件 测试 技 
术 的 成 熟 , 人 们 开始 关注 软件 的 非 功能 测试 ,例如 ,性 能 测试 .安全 性 测试 等 。 对 于 某 些 类 型 
的 应 用 ,性 能 测试 或 安全 性 测试 尤为 重要 。 例 如 ,对 于 Web 应 用 来 说 ,性 能 测试 和 安全 性 测 
试 是 非常 重要 的 ,12306 的 案例 很 好 地 说 明了 这 一 点 。 


7.1.1 性 能 测试 简介 


要 理解 什么 是 性 能 测试 ,首先 要 理解 系统 有 哪些 性 能 指标 ,还 要 理解 负载 测试 .压力 测 
试 和 性 能 测试 的 区 别 和 联系 。 


1. 系统 性 能 与 性 能 测试 


人 性 能 测试 是 为 了 发 现 系统 性 能 问题 或 获取 系统 性 能 相关 指标 (例如 ,运行 速度 .响应 时 
间 ,资源 使 用 率 等 ) 而 进行 的 测试 。 性 能 测试 是 系统 测试 的 主要 内 容 之 一 ,通常 是 在 真实 环 
境 、 特 定 负载 条 件 下 ,使 用 性 能 测试 工具 模拟 软件 系统 的 实际 运行 ,监控 系统 性 能 的 各 项 指 
标 , 对 测试 结果 进行 分 析 ,确定 系统 性 能 是 否 满足 软件 规格 说 明 书 对 系统 性 能 的 要 求 。 不 借 
助 性 能 测试 工具 是 不 可 能 完成 性 能 测试 任务 的 ,性 能 测试 工具 对 性 能 测试 是 至 关 重 要 的 。 
例如 , 想 要 测试 数 千 万 用 户 同 时 访问 Web 应 用 时 被 测 Web 应 用 的 性 能 ,只 能 通过 性 能 测试 
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工具 模拟 数 千 万 用 户 的 操作 。 

软件 系统 的 性 能 包含 两 类 : 系统 资源 (CPU 内存 等 ) 的 使 用 率 ; 系统 行为 表现 (运行 速 
JE .响应 时 间 等 )。 人 性 能 指标 是 评价 应 用 性 能 的 度量 ,典型 的 性 能 指标 有 响应 时 间 、 系 统 吞吐 
量 、 并 发 用 户 数 、 资 源 占 用 率 等 。 

1) 响应 时 间 

响应 时 间 是 指 从 客户 端 发 出 请 求 到 得 到 服务 器 响应 所 需要 的 时 间 。 响 应 时 间 越 短 , Ж 
统 性 能 越 好 。 有 些 性 能 测试 工具 用 TTLB(Time to Last Byte, 从 发 起 一 个 请 求 开 始 到 客户 
端 接收 到 最 后 一 个 字 节 所 耗费 的 时 间 ) 来 度量 响应 时 间 。 响 应 时 间 的 单位 一 般 为 秒 (s) 或 者 
毫秒 (ms) 。 

响应 时 间 会 受到 用 户 负载 (使 用 系统 的 用 户 数量 ) 的 影响 ,通常 情况 下 ,响应 时 间 随 着 用 
户 负载 的 增加 而 缓慢 增加 ,但 是 , 当 用 户 负载 达到 一 定 值 时 ,系统 的 某 一 种 或 几 种 资源 即将 
耗 尽 ,响应 时 间 将 会 快速 增加 。 

在 互联 网 上 对 于 用 户 响 应 时 间 有 一 个 普遍 采用 的 原则 ,2/5/10 原则 , 即 在 2s 内 的 响应 
被 认为 是 “非常 有 吸引 力 ” 的 用 户 体 验 ; 在 2 一 5s 的 响应 被 认为 是 “比较 不 错 ? 的 用 户 体验 ; 
在 5 一 10s 的 响应 被 认为 是 “糟糕 的 用 户 体验 ; 超过 10s 的 响应 被 认为 是 “不 可 接受 的 ”的 
用 户 体验 。 

2) 系统 吞吐 量 

系统 春 吐 量 是 指 在 某 个 特定 的 时 间 单 位 内 系统 能 处 理 的 最 大 用 户 请 求 数量 或 最 大 事务 
处 理 数量 ,系统 吞吐 量 反映 了 系统 的 处 理 能 力 。 系 统 否 吐 量 越 大 ,系统 的 性 能 越 好 。 系 统 否 
叶 量 常用 的 单位 有 请 求 数 / 秒 、 页 面 数 / 秒 或 字 节 数 / 秒 ,在 有 些 性 能 测试 工具 中 ,系统 奉 吐 量 
的 单位 是 TPS(Transaction Per Second, 每 秒 事务 处 理 数 )。 

3) 并 发 用 户 数 

并 发 用 户 数 是 指 在 某 一 给 定时 间 内 ,系统 能 够 处 理 的 最 大 用 户 数量 ,并 发 用 户 数 也 反映 
了 系统 的 处 理 能 力 ,并 发 用 户 数 越 大 ,系统 的 性 能 越 好 。 

我 们 可 以 将 并 发 分 为 两 种 情况 : 严格 意义 的 并 发 和 广义 的 并 发 。 严 格 意义 的 并 发 是 指 
用 户 在 同一 时 刻 做 同一 件 事情 ,例如 ,同时 登录 系统 ,同时 提交 某 个 表单 ; 广义 的 并 发 是 指 
用 户 同 时 使 用 系统 进行 一 些 操作 ,这 些 用 户 不 一 定 是 做 同一 件 事情 ,有 些 用 户 可 能 在 登录 系 
统 . 有 些 用 户 可 能 在 提交 表单 。 

4) 资源 占用 率 

资源 占用 率 是 指 系统 在 一 定 条 件 下 不 同 资源 的 使 用 程度 ,例如 ,CPU 内存、 网络 带宽 
的 占用 情况 。 一 般 来 说 ,资源 占用 率 越 高 ,系统 吞吐 量 和 并 发 用 户 数 越 小 ,系统 的 性 能 越 低 。 


2. 负载 测试 .压力 测试 和 性 能 测试 的 区 别 和 联系 


负载 测试 (Load testing) HEA) Wik (Stress Test, 又 称 为 强度 测试 ) 和 性 能 测试 三 个 概 
念 常常 引起 混淆 ,难以 区 分 ,从 而 造成 不 正确 的 理解 和 错误 的 使 用 。 

负载 测试 .压力 测试 和 性 能 测试 的 测试 目的 不 同 ,但 其 手段 和 方法 在 一 定 程度 上 比较 相 
似 。 通 常会 使 用 相同 的 测试 环境 和 测试 工具 ,而 且 都 会 监控 系统 所 占用 资源 的 情况 以 及 其 
他 相应 的 性 能 指标 ,这 也 是 造成 概念 混淆 的 主要 原因 。 

我 们 知道 ,软件 总 是 运行 在 一 定 的 环境 下 ,这 种 环境 包括 支撑 软件 运行 的 软 硬 件 环 境 和 
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影响 软件 运行 的 外 部 条 件 。 为 了 让 客户 使 用 软件 系统 时 感到 满意 ,必须 确保 系统 运行 良好 ， 
达到 高 安全 、 高 可 靠 和 高 性 能 。 其 中 ,系统 是 否 具有 高 性 能 的 运行 特征 ,不 仅 取 决 于 系统 本 
身 的 设计 和 程序 算法 ,而 且 取 决 于 系统 的 运行 环境 。 系统 的 运行 环境 会 依赖 于 一 些 关键 因 
素 ,例如 : 

+ 系统 架构 ,如 分 布 式 服务 器 集群 还 是 集中 式 主机 系统 等 。 

° 硬件 配置 ,如 服务 器 的 配置 ,CPU、 内 存 等 配置 越 高 ,系统 的 性 能 会 越 好 。 

。 网 络 带 宽 , 随 着 带宽 的 提高 ,客户 端 访问 服务 器 的 速度 会 有 较 大 的 改善 。 

。 支 撑 软 件 的 选 定 , 如 选 定 不 同 的 数据 库 管理 系统 (Oracle、MySQL 等 ) 和 Web 应 用 
服务 器 (Tomcat、GlassFish、Jboss、WebLogic 等 ) ,对 应 用 系统 的 性 能 都 有 影响 。 

外 部 负载 ,同时 有 和 多少 个 用 户 连 接 、 用 户 上 载 文 件 大 小 、 数 据 库 中 的 记录 数 等 都 会 对 
系统 的 性 能 有 影响 。 一 般 来 说 ,系统 负载 越 大 ,系统 的 性 能 会 降低 。 

从 上 面 的 讨论 可 以 看 出 ,要 使 系统 的 性 能 达到 一 个 最 好 的 状态 ,不 仅 要 通过 对 处 在 特定 
环境 下 的 系统 进行 测试 以 完成 相关 的 验证 ,而 且 往往 要 根据 测试 的 结果 ,对 系统 的 设计 , 代 
人 码 和 配置 等 进行 调整 ,提高 系统 的 性 能 。 许 多 时 候 , 系 统 性 能 的 改善 需要 测试 ,调整 .再 测 
试 .再 调整 …… 是 一 个 持续 改进 的 过 程 ,这 就 是 我 们 经 常 说 的 性 能 调 优 (perormance 
tuning), 

在 了 解 了 这 样 一 个 背景 之 后 ,就 比较 容易 理解 为 什么 在 性 能 测试 中 常常 要 谈 负载 测试 。 
从 测试 的 目的 出 发 ,从 用 户 的 需求 出 发 ,就 比较 容易 区 分 性 能 测试 .负载 测试 和 压力 测试 。 
性 能 测试 是 为 了 获得 系统 在 某 种 特定 的 条 件 下 (包括 特定 的 负载 条 件 下 ) 的 性 能 指标 数据 ， 
而 负载 测试 .压力 测试 是 为 了 发 现 软件 系统 中 所 存在 的 问题 ,包括 性 能 瓶颈 .内存 泄漏 等 。 
通过 负载 测试 ,也 是 为 了 获得 系统 正常 工作 时 所 能 承受 的 最 大 负载 ,这 时 负载 测试 就 成 为 容 
量 测试 。 通 过 压力 测试 ,可 以 知道 在 哪些 极限 情况 下 系统 会 崩溃 、 系 统 是 否 具有 自我 恢复 性 
等 ,但 更 多 的 是 为 了 确定 系统 的 稳定 性 。 

负载 测试 是 模拟 实际 软件 系统 所 承受 的 负载 条 件 的 系统 负荷 ,通过 不 断 加 载 (如 逐渐 增 
加 模拟 用 户 的 数量 ?或 其 他 加 载 方式 来 观察 不 同 负载 下 系统 的 响应 时 间 、 系 统 的 吞吐 量 、 系 
统 的 资源 占用 率 ( 如 CPU 内存 的 占用 率 ) 等 ,以 检验 系统 的 行为 和 特性 ,发 现 系统 可 能 存在 
的 性 能 瓶颈 、 内 存 泄漏 等 问题 。 

负载 测试 是 为 了 发 现 系 统 的 性 能 问题 ,负载 测试 需要 通过 系统 性 能 特性 或 行为 来 发 现 
问题 ,从 而 为 性 能 改进 提供 帮助 ,从 这 个 意义 看 ,负载 测试 可 以 看 作 性 能 测试 的 一 部 分 。 但 
两 者 的 目的 是 不 一 样 的 ,负载 测试 是 为 了 发 现 缺 陷 , 而 性 能 测试 是 为 了 获取 性 能 指标 。 因 为 
在 性 能 测试 过 程 中 ,也 可 以 不 调整 负载 ,而 是 在 同样 负载 情况 下 改变 系统 的 结构 ,改变 算法 、 
改变 硬件 配置 等 来 得 到 性 能 指标 数据 ,从 这 个 意义 看 ,负载 测试 可 以 看 作 是 性 能 测试 所 使 用 
的 一 种 技术 , 即 性 能 测试 使 用 负载 测试 的 技术 、 使 用 负载 测试 的 工具 。 性 能 测试 要 获得 在 不 
同 的 负载 情况 下 的 性 能 指标 数据 。 

压力 测试 是 在 强 负载 (大 数据 量 、 大 量 并 发 用 户 等 ) 下 的 测试 ,查看 应 用 系统 在 峰值 使 用 
情况 下 的 操作 行为 ,从 而 有 效 地 发 现 系统 的 某 项 功能 隐患 ,判断 系统 是 否 具有 良好 的 容错 能 
力 和 可 恢复 能 力 。 压 力 测 试 分 为 高 负载 下 的 长 时 间 ( 如 24 小 时 以 上 ) 的 稳定 性 压力 测试 和 
极限 负载 情况 下 导致 系统 崩溃 的 破坏 性 压力 测试 。 

压力 测试 可 以 被 看 作 是 负载 测试 的 一 种 , 即 高 负载 下 的 负载 测试 ,或 者 说 压力 测试 采用 
了 负载 测试 技术 。 通 过 压力 测试 ,可 以 更 快 地 发 现 内 存 泄漏 问题 ,还 可 以 更 快 地 发 现 影响 系 
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统 稳定 性 的 问题 。 例 如 ,在 正常 负载 情况 下 , 某 些 功能 不 能 正常 使 用 或 系统 出 错 的 概率 比较 
低 ,可 能 一 个 月 只 出 现 一 次 ,但 在 高 负载 (压力 测试 ) 下 ,可 能 一 天 就 出 现 , 从 而 发 现 有 缺陷 的 
功能 或 其 他 系统 问题 。 

综 上 所 述 ,负载 测试 .压力 测试 和 性 能 测试 的 概念 可 以 概括 如 下 : 
负载 测试 是 通过 改变 系统 负载 方式 增加 负载 等 来 发 现 系 统 中 所 存在 的 性 能 问题 。 
负载 测试 是 一 种 测试 方法 ,可 以 为 性 能 测试 .压力 测试 所 采用 。 负 载 测试 的 加 载 方 
式 也 有 很 多 种 ,可 以 根据 测试 需要 来 选择 。 
压力 测试 通常 是 在 高 负载 情况 下 来 对 系统 的 稳定 性 进行 测试 ,从 而 更 有 效 地 发 现 系 
统 稳定 性 的 隐患 和 系统 在 负载 峰值 的 条 件 下 功能 隐患 等 。 
性 能 测试 是 为 获取 或 验证 系统 性 能 指标 而 进行 的 测试 。 多 数 情况 下 ,性 能 测试 会 在 
不 同 负载 情况 下 进行 。 


7.1.2 性 能 测试 工具 
性 能 测试 工具 有 很 多 ,限于 篇 幅 , 这 里 只 介绍 两 种 。 


1. LoadRunner 简介 


LoadRunner 是 Micro Focus 公司 的 商用 自动 化 性 能 测试 工具 ,现在 它 是 HP 公司 旗下 
的 自动 化 测试 工具 。LoadRunner 是 一 种 预测 系统 行为 和 性 能 的 负载 测试 工具 。 通 过 模拟 
成 千 上 万 用 户 实 施 并 发 操作 及 实时 性 能 监测 的 方式 来 确认 和 查找 系统 性 能 问题 ， 
LoadRunner 能 够 对 整个 企业 架构 进行 测试 。 企 业 使 用 LoadRunner 能 最 大 限度 地 缩短 测 
试 时 间 ,优化 性 能 和 加 速 应 用 系统 的 发 布 周期 。LoadRunner 适用 于 各 种 体系 架构 的 自动 化 
负载 测试 ,能 预测 系统 行为 并 评估 系统 性 能 。 

LoadRunner 主要 由 4 个 部 分 组 成 ,如 图 7.1 所 示 。 

* 脚本 生成 器 (Virtual User Generator, VuGen) 。 

* 控制 器 (Controller) 。 

* 负载 生成 器 (Load Generator) 。 

。 结果 分 析 工 具 (Analysis) 。 
控制 器 


负载 生成 器 AAA “KA 结果 分 析 工具 


应 用 
服务 器 


服务 器 


图 7.1 LoadRunner 组 成 示意 图 
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2. JMeter 简介 


Apache JMeter 是 Apache 组 织 开 发 的 基于 Java 的 开源 压力 测试 工具 。 它 最 初 被 设计 
用 于 对 Web 应 用 进行 压力 测试 ,但 后 来 扩展 到 其 他 测试 领域 。 它 可 以 用 于 测试 静态 和 动态 
资源 ,以 及 动态 Web 应 用 。JMeter 可 以 用 于 模拟 单 台 服务 器 、 服 务 器 组 、 网 络 或 对 象 ,测试 
在 不 同 负载 情况 下 被 测 应 用 承受 压力 的 强度 和 分 析 整 体 性 能 。 

JMeter 具有 如 下 特点 : 

(1) 能 够 对 多 种 应 用 /服务 器 /协议 进行 负载 和 性 能 测试 。 

(D Web HTTP.HTTPS(Java, NodeJS, PHP, ASP, NET- ++ Ж 

@ SOAP/REST Webservices. 

@ FTP. 

(D Database via JDBC. 

© LDAP, 

© Message Oriented Middleware (MOM) via JMS. 

@ Mail——SMTP,POP3 和 IMAP., 

® Native 命令 或 shell 脚本 。 

© ТСР, 

D Java WR. 

(2) 功能 完备 的 测试 环境 ,可 以 录制 .编写 .调试 测试 脚本 。 

(3) 命令 行 模式 ,可 以 用 命令 行 执行 测试 脚本 。 

(4) 动态 HTML 测试 报告 。 

(5) 支持 多 种 响应 格式 ,例如 ,HTML JSON XML 或 任何 文本 格式 。 

(6) 完整 的 可 移植 性 和 100028 Java, 

CD 完全 多 线程 框架 ,允许 通过 多 个 线程 并 发 取样 和 通过 单独 的 线程 组 对 不 同 的 功能 
同时 取样 。 

(8) 缓存 和 离线 分 析 / 回 放 测试 结果 。 

(9) JMeter 的 高 可 扩展 性 。 

CD 插件 式 取样 器 可 以 扩充 测试 能 力 。 

© 脚本 取样 器 (使 用 JSR223 兼容 语言 ,例如 ,Groovy 和 BeanShelD 。 

@ 可 以 通过 插件 式 计 时 器 实现 各 种 负载 统计 表 。 

@ 数据 分 析 和 可 视 化 插件 提供 了 很 好 的 可 扩展 性 以 及 个 性 化 。 

C) 可 以 为 测试 提供 动态 数据 或 即时 数据 。 

© 容易 与 第 三 方 工具 ,例如 ,与 Maven、Graddle #1 Jenkins 集成 。 

在 设计 阶段 ,JMeter 能 够 充当 HTTP Proxy( 代 理 ) 来 记录 IE/Netscape 的 HTTP 请 
求 , 也 可 以 记录 Apache 等 WebServer 的 log 文件 来 重 现 HTTP 流量 。 当 这 些 HTTP 客户 
端 请 求 被 记录 以 后 ,测试 运行 时 可 以 方便 地 设置 重复 次 数 和 并 发 度 (线程 数 ) 来 产生 巨大 
的 流量 。JMeter 还 提供 可 视 化 组 件 以 及 报表 工具 把 服务 器 在 不 同 压力 下 的 性 能 展现 
出 来 。 
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(.2 JMeter 起 步 
— 
本 节 介绍 性 能 测试 工具 JMeter 的 安装 .主要 元 件 、. 测 试 计划 示例 和 模板 。 


7.2.1 JMeter 的 安装 和 启动 


可 以 在 JMeter 官方 网 站 http://jmeter. apache. org/ F Z JMeter。 编 写本 书 时 ， 
JMeter 的 最 新 版 本 是 4. 0。JMeter 4. 0 要求 Java 8 或 9, JMeter 是 跨 平台 的 。 下 面 以 
Windows 平台 为 例 , 讲 解 J Meter 的 使 用 。 将 下 载 的 压缩 文件 apache-jmeter-4. 0. zip 解压 ， 
例如 ,解压 到 DD 盘 。 

JMeter 4. 0 的 安装 目录 中 主要 包含 如 下 文件 夹 : 

* bin 文件 夹 一 一 JMeter 的 可 执行 文件 所 在 的 文件 夹 。 

* docs 文件 夹 一 一 JMeter АРІ 文档 所 在 的 文件 夹 。 

。 lib 文 件 夹 一 一 JMeter 依赖 的 库 文件 所 在 的 文件 夹 。 

* printable docs 文件 夹 一 一 测试 计划 示例 Cdemos)、 如何 扩展 JMeter (extending) , 

JMeter 如 何 本 地 化 (Localisting) 和 用 户 手册 等 文档 所 在 的 文件 夹 。 


运行 D:Napache-jmeter-4. 0\bin 文件 夹 中 的 jmeter. bat 文件 ,将 启动 JMeter 的 图 形 用 
户 界面 ,如 图 7.2 所 示 。 


File Edit Search Run С 


E та 
А TestPlan 


Test Plan 


Р 7.2 JMeter 初始 界面 


选择 Options Look and Feel 菜单 项 ,可 以 改变 JMeter 图 形 用 户 界面 的 外 观 ,修改 
JMeter 外 观 需 要 重启 动 JMeter。 例 如 ,选择 Windows 外 观 , 如 图 7. 3 所 示 。 
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рю: Доо @ | 


Fag 


AA @ @ |“ &|es t |, B 


User Defined Variables 


(pasa | маш] (Баала Chigi.) ( Derete |[ w |[ doen | 
[l Run Thread Groups consecutively Ge one at a tine) 

[V] Run. tearDosn Thread Groups after shutdown of main threads 

El Functional Test Mode (i.e. save Response Data and Sampler Data) 

Selecting Functional Test Mode may adversely affect performance. 


Mà directory er jar to classpath | Bronze...) [Delete | [ Сеш ] 


Library 


图 7.3 Windows 外 观 的 JMeter 界面 


选择 Options 一 Choose Language~~Chinese(Simplified) 菜 单项 ,结果 如 图 7. 4 所 示 。 


文件 бйй Search 运行 选 页 帮助 


DG X 201+ - |> b @ @ |“ шеъ B Fo: До оо Ө) 
А 测试 计划 
‘BPE: [Test Plan \ 
pe 
用 户 定义 的 变量 | 
Ern I i 
Detail [.Add {гоа Clipboard ] 80% || vp || Down | || 


回 独 立 运行 每 个 线程 组 (例如 在 一 个 组 运行 结束 后 启动 下 一 个 》 

(Run tearDown Thread Groups after shutdown of main threads 
E 函数 测试 模式 

只 有 当 你 需要 记录 每 个 请 求 从 服务 器 取得 的 数据 到 文件 时 

才 需 要 选择 函数 测试 模式 。 


选择 这 个 选项 很 影响 性 能 。 


Add directory or jar to classpath [ 35. 


Library 


图 7.4 JMeter 的 中 文 界面 
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可 以 发 现 ,这 样 修改 JMeter 的 图 形 用 户 界 面 为 中 文 , 下 次 启动 时 还 是 英文 。 如 何 修改 
JMeter 图 形 用 户 界面 的 默认 语言 呢 ? 可 以 在 JMeter 安装 目录 的 bin 文件 夹 中 找到 文件 
jmeter. properties. Ж # language=en 修改 为 language—zh CN. 

JMeter 图 形 用 户 界面 用 于 JMeter 性 能 测试 的 开发 以 及 记录 、 回 放 、 调 试 测试 脚本 。 


7.2.2 JMeter 的 主要 元 件 


JMeter 用 测试 计划 来 组 织 JMeter 的 测试 步骤 ,JMeter 测试 计划 一 般 包 含 如 下 元 件 : 
线程 组 ,控制 器 、 监 听 器 、 定 时 器 、 断 言 和 配置 元 件 等 。 


1. 线程 组 


线程 组 是 测试 计划 的 起 点 ,所 有 控制 器 都 必须 在 一 个 线程 组 中 ,其 他 元 件 ( 例 如 , 监 
听 器 ) 既 可 以 放 在 线程 组 中 ,也 可 以 直接 放 在 测试 计划 下 ,直接 放 在 测试 计划 下 的 元 件 将 


可 应 用 于 所 有 线程 组 。 线 程 组 元 件 控制 一 组 JMeter 用 于 执行 测试 的 线程 ,如 图 7.5 
BUR o 


文件 ЖИЕ Search 运行 AIR 帮助 —— 
curam 501+ -bboy 
B8 Test Pl 
| ^ш 线程 组 
名 称 :| 线程 组 | 
注释 : 
AER HESSE SEAT DE 
€ 4% OStart Next Thread Loop © 停止 线程 © 停止 测试 © Stop Test Now 
线程 属性 
Am. 1 
Ramp-Up Period (in seconds): 1 
循环 次 数 回 永远 п 
Delay Thread creation until needed 
调度 器 
调度 器 配置 
нени бо [ | 
启动 延迟 (种) 


图 7.5 线程 组 的 控制 设置 


线程 数 : 线程 组 的 线程 数量 。 通 俗 地 说 ,线程 数 可 看 作 虚 拟 用 户 数 , 用 于 模拟 与 服务 器 
应 用 的 并 发 连接 。 

Ramp-Up Period: 加 载 线程 的 时 间 , 例 如 ,线程 组 中 的 线程 数 是 10, Ramp-Up Period 
的 设置 是 100s,JMeter 将 在 100s 内 逐渐 加 载 线程 。 每 隔 10s 加 载 一 个 线程 。 需 要 适当 设 
置 Ramp-Up Period, 以 避免 测试 启动 时 过 载 或 最 后 一 个 线程 启动 时 第 一 个 线程 已 结束 。 

调度 器 : 用 于 设置 线程 组 的 持续 时 间 和 启动 延迟 时 间 , 即 在 启动 延迟 时 间 之 后 开始 执 
行 线程 组 中 的 线程 ,在 持续 时 间 之 前 结束 线程 组 中 的 线程 。 
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2. 控制 器 


JMeter 有 两 种 控制 器 : 取样 器 (Sampler) 和 逻辑 控制 器 ,取样 器 用 于 向 服务 器 发 送 请 
求 ,例如 ,HTTP 请 求 取 样 器 使 得 JMeter 发 送 一 个 HTTP 请 求 。JMeter 4.0 支持 的 取样 器 
如 图 7.6 所 示 。 
Ex 07s 
BAY Oo v wWietH 


文件 编辑 Search 运行 选项 帮助 
C6 eX p B| + - 


Sg Test Plan 


[00:00:00 Д о о/о @| 


° 
Ei 添加 Sampler 
= " Test Action I—— | 
29 Think Times to children d пензе 
Start по pauses — AJP/1.3 Sampler 
Validate = Access Log Sampler low 
z5 == | BeanShell Sampler 
定时 器 FTP 请 求 p 
复制 Cul+C JDBC Request 
Ex Eum c | Test Fragment | jis Point-to-Point — | 
Pes A ИНС, Ut JMS Publisher -一 一 
| mmm JMS Subscriber mmm 
пж... needed 258223 Sampler 
en JUnit Request. 
选中 部 分 保存 为 Java R 
LDAP Extended Request 一 一 一 
Save Node As Image Ctrl+G DAAR | 
Save Screen AsImage — Ctrl«Shift«G Mall Reader Sampler 
启用 OS Process Sampler 
m SMTP Sampler 
Toggle CulsT TCP 取 样 路 
帮助 


图 7.6 JMeter4.0 中 的 取样 器 


逻辑 控制 器 用 于 控制 何 时 发 送 请 求 ,改变 发 送 请求 的 顺序 ,控制 是 否 重 复发 送 请 求 ( 循 
环 控制 器 .ForEach 控制 器 .While Controller) ,或 者 根据 条 件 选 择 发 送 不 同 的 请 求 ( 如 果 控 
制 器 .Switch Controller), JMeter 4. 0 支持 的 逻辑 控制 器 如 图 7.7 所 示 。 


文件 йй Search 运行 UR 帮助 
iG X UB + - + P p @ ө! ée t. ЫШ 


Fa A o о/о Ө) 


юш 
Add Think Times to children Beem Í SOT T 
Start ‚ mecum ) 
Start no pauses ааа | нема 
Validate | While Controller 
иш ' 
тш сш+х | Critical Section Controller ц 
Ctrl+C ws | ForEach 控 制 器 | 
粘贴 Ctrl+V Test Fragment | Include Controller Е 
Duplicate Ctrl«Shift«c = ， SRM 
эн Delete axa ‘oes | 
I MN ИНИ с, F | 
we гу | pre] | 
тыты 
есм | Runtime Controller — 
Save Node As Image Ctrl+G 简单 控制 器 | 
Save Screen As Image Ctrl+Shift+G .吞吐 县 控制 器 | 
aa | d =) 
l Switch Controller 
zm — 
Toggle CtrlsT 
=m 


7.7 JMeter 4. 0 中 的 逻辑 控制 器 


3. 监听 器 
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大 多 数 监听 器 除了 监听 测试 结果 外 ,还 可 以 浏览 .保存 和 读 取 测试 结果 。JMeter 4.0 中 
的 监听 器 如 图 7.8 所 示 。 


1 toa mom Л == 
| @@аыЫХ LD + - “P p @@ ч é e t. E B poo: До оо Ө 
a [7] > Threads (Users) > 
p сш+у 配置 元 件 让 = 
监听 器 ARB 
m. Summary Report E 
选中 部 分 保存 为.. Backend Listener =) 
Save Node As Image Ctrl+G 
Save Screen As Image Ctrl+Shift+G е ce 
启用 Comparison Assertion Visualizer 
sm 
Toggle си+т 图 形 结果 
= JSR223 Listener 
BRRR 
ТШ КИЗ Hapana me О 
只 有 当 你 需要 记录 每 个 请 求 从 服务 器 取得 的 数 LM S 
Simple Data Writer 
才 需 要 选择 男 数 测试 模式 。 上 ES 
ү 
选择 这 个 选项 很 影响 性 能 。 Beanshell Ustener 
Add directory or jar to classpath [| 288... J [ith | [GAMA] 
Library 
7.8 JMeter 4.0 中 的 监听 器 
4. 定时 器 


定时 器 控制 发 送 请 求 的 时 间 ,因为 JMeter 是 模拟 人 的 操作 对 系统 进行 性 能 测试 的 ,人 
在 操作 系统 时 ,不 同 的 操作 步骤 之 间 有 一 定 的 时 间 间 隔 , 我 们 将 这 个 时 间 间 隔 称 为 思考 时 
间 。 通 过 定时 器 设置 思考 时 间 , 使 得 模拟 更 接近 实际 场景 。JMeter 4.0 中 的 定时 器 如 图 7.9 


所 示 。 


5. 断言 


断言 用 于 检查 被 测试 系统 的 返回 值 是 否 与 期 望 值 一 致 。JMeter 4.0 中 的 断言 如 图 7. 10 


所 示 。 


6. 配置 元 件 


配置 元 件 用 于 设置 取样 器 运行 时 使 用 的 默认 值 或 变量 ,JMeter 4.0 中 的 配置 元 件 如 


图 7.11 所 示 。 
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Um Ey 
文件 编辑 Search 运行 选项 帮助 | 
Lak X со + -<|> b @@ ч жо t |; B ро:оо:оо A o о/о @ 
— —— = al 
585 Ctrl V 
“察看 结果 树 | 
m Summary Report. 
选中 部 分 保存 为 . ERES 
z Backend Listener 
Save Node AsImage Ctrl«G 
Save Screen As Image Ctrl+Shift+G растане Graph 
BH Comparison Assertion Visualizer 
БЫ: 生成 概要 结果 
Toggle Ctrl+T EKER 
JSR223 Listener 
帮助 Groups after shutdo 
百 函数 测试 模式 Response Time Graph 
只 有 当 你 需要 记录 每 个 请 求 从 服务 器 取得 的 # 保存 响应 到 文件 
才 需 要 选择 函数 测试 模式 。 Peete 
BeanShell Listener 
选择 这 个 选项 很 影响 性 能 。 
Add directory or jar to classpath [ 88... J] [清除 ] 
Library 
图 7.9 JMeter 4.0 中 的 定时 器 
f Apache JMeter: ce mt 
| 编辑 Search 运行 选项 帮助 ] 
O@@alX оо + -|> bp @@|# шеъ: В [һю:00:00 До оо @ 
Е). | Wo > Threads (Users) * 3 
粘贴 Ctrl+V 配置 元 件 [4 
пж. ЕЛА i 
合并 定时 器 
义 的 变量 
选中 部 分 保存 为 … — = à 
Save Node As Image Ctrl+G 后 置 处 理 器 a 


Save Screen As Image Ctrl+Shift+G | RES RTS 
启用 Test Fragment Sy а 
= -— JSR223 Assertion 
Toggle сш+т 俩 和 在 一 个 组 运行 车 利 xpath Assertion 
帮助 Я Groups after shut C ге. боп 
加 函数 测试 模式 断言 持续 时 间 
只 有 当 你 需要 记录 每 个 请 求 从 服务 器 取得 的 。 MDA en 
才 和 需要 选择 函数 测试 模式 。 AM REUS 
MLE 
选择 这 个 选项 很 影响 性 能 。 XML Schema Assertion 
BeanShell 断 言 
Add directory or jar to classpath (Alia...) (BR) 上 清除 = 


о) 


Library 


Р 7.10 JMeter 4.0 中 的 断言 
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E98 alix! f0:00:00 Д o oo G3) 
Kin i > Threads (Users) > : 
BE Ctrl+V . RET COV 数据 文件 讼 置 
打开 监听 器 HTTP 信 息 头 管理 器 
жип HTTP Cache Manager 

选中 部 分 保存 为. Реа HTTPRERSRUAR = 
Save Node As Image Ctrl-G ERNE uem | | 
Save Screen As Image Ctrl+Shift+G | WE DNS Cache Manager 
局 用 Test Fragment FTP 请 求 抽 省 值 
禁用 RTE НТТРЕРБЕ РЕВ 
Toggle Cul+T = JDBC Connection Configuration 
em oups after shutdowr = 

PERAKE LDAP Extended Request Defaults 

只 有 当 你 需要 记录 每 个 请 求人 服务 器 取得 的 数 | UNE 

才 需 要 选择 函数 测试 模式 。 mnra 

MARET 
选择 这 个 选项 很 影响 性 能 。 TCP 取 样 器 配置 
用 户 定义 的 变量 
Add directory or jar to classpath [Niin] [Wi] (GK) 
Library 
图 7.11 JMeter 4. 0 中 的 配置 元 件 
7. 前 置 处 理 器 


前 置 处 理 器 用 于 在 作用 域内 的 取样 器 执行 前 执行 一 些 操作 ,JMeter 4.0 中 的 前 置 处 理 


器 如 图 7.12 所 示 。 


Apache JMeter (40 г: 


文件 GM Search 运行 MUR 帮助 


LG Qk X оо! + - + |P p @ өч wading 


Save Node AsImage Ctrl+G 
Save Screen As Image Ctrl+Shift+G 


启用 
LI 
Toggle 


Ctr V 


00:00:00 Д о о/о Ө) 


сш+т 


BARAER 


只 有 当 你 需要 记录 每 个 请 求 从 服务 器 取得 的 数据 到 文件 时 
才 需 要 选择 函数 测试 模式 。 


选择 这 个 选项 很 影响 性 能 。 


Add directory or jar to classpath (Gili...) ( A885...) (GAR) 


Library 


图 7.12 JMeter 4.0 中 的 前 置 处 理 器 
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8. 后 置 处 理 器 


后 置 处 理 器 用 于 在 作用 域内 的 取样 器 执行 后 执行 一 些 操作 ,JMeter 4.0 中 的 后 置 处 理 
器 如 图 7.13 所 示 。 


文件 GHB Search 运行 选项 帮助 
O@aalX LD|[+ -|> p @ @ |“ datn [һю:00:00 À o о/о @ 


Save Node Aslmage Ctrl+G » CSS/JQuery Extractor 

Save Screen As Image Ctrl+Shift+G JSON Extractor 

启用 Boundary Extractor 
正则 表达 式 提取 器 

禁用 

Toggle сш+т 


JSR223 PostProcessor 

Debug PostProcessor 

: JDBC PostProcessor 
DUO, Result Status Action Handler 
RS5 ал) XPath Extractor 

才 需 要 选择 函数 测试 模式 。 ване Fostirocessori nn] 


选择 这 个 选项 很 影响 性 能 。 


Add directory or jar to classpath 


图 7.13 JMeter 4.0 中 的 后 置 处 理 器 


元 件 的 执行 顺序 是 : 配置 元 件 . 前 置 处 理 器 、 定 时 器 .取样 器 .后 置 处 理 器 .断言 、 监 
听 器 。 


7.2.3 JMeter 测试 计划 示例 和 模板 
1. JMeter 测试 计划 示例 


初学 者 总 是 可 以 从 软件 附带 的 示例 开始 学 习 软 件 的 使 用 ,JMeter 的 安装 目录 中 有 一 个 
文件 夹 \printable_docs\demos, 其 中 提供 了 一 些 测试 计划 示例 ,我 们 可 以 在 JMeter 图 形 用 
户 界 面 中 打开 测试 计划 示例 。 

例如 ,要 打开 测试 计划 示例 SimpleTestPlan ,选择 “文件 ”打开 ”菜单 项 ,打开 demos 
文件 夹 中 的 SimpleTestPlan. jmx, 如 图 7. 14 所 示 。 

我 们 可 以 通过 JMeter 左边 的 测试 计划 导航 树 浏览 测试 计划 包含 的 元 件 , 单 击 工具 栏 中 
的 “启动 ”按钮 ,执行 测试 计划 。 

2. 脚本 录制 模板 Recording 


JMeter 有 一 个 “ 非 测试 元 件 ”>“HTTP 代理 服务 器 "和 一 个 “逻辑 控制 器 ”~ 录制 控制 
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文件 编辑 Search 运行 选项 帮助 


kl X го + - — P bp @ @ ч шеъ В Bo:oo32 Доол 图 
= Ё Test Plan 
S Jakarta Users 图 形 结果 
iE at Pases 名 称 : [File Reporter 
Hone Р; 
Z^ News Page 注释 : 
T ane Page 所 有 数据 宇和 一 个 文件 


ае) a 文件 名 sinple-tes 
* 


jE- )Log/Display Only: 回 仅 日 志 错误 OM successes 


要 显示 的 图 形 MHR OT OPA Mae MALS 


图 7.14 SimpleTestPlan 测试 计划 


器 ”, 利 用 这 两 个 元 件 可 以 创建 一 个 测试 计划 ,用 于 录制 手工 测试 的 步骤 。JMeter 录制 脚本 
的 原理 如 图 7. 15 所 示 。 


HTTP 代 理 服务 器 被 测 应 用 
录制 控制 器 


客户 端 浏 览 器 


图 7.15 脚本 录制 原理 示意 图 
JMeter 充当 HTTP 代理 服务 器 ,拦截 浏览 器 对 被 测 应 用 的 访问 ,录制 控制 器 记录 访问 
操作 。 
脚本 录制 的 步骤 如 下 : 
(1) 从 模板 Recording 新 建 测试 计划 。 


CD 选择 “文件 ”一 Templates 菜单 项 ,在 弹出 的 Templates 窗口 选择 模板 Recording, lll 
图 7.16 所 示 。 


©) 单 击 Create 按钮 ,创建 一 个 测试 计划 ,如 图 7. 17 所 示 。 


@ 启动 代理 服务 器 , 单 击 测试 计划 树 中 的 HTTP(S) Test Script Recorder 选项 ,注意 
到 端口 是 8888, 可 以 根据 需要 修改 端口 , 单 击 “ 启 动 ”按钮 ,如 图 7. 18 所 示 。 


196, 软件 测试 实战 教程 
NN 


Select Template 


Template showing how to record 


JMeter Configuration 


е JMeter Server Proxy port is set to 8888, you may want to change this 


Browser Configuration 


Configure your browser so that it uses the JMeter proxy, set 


е the host of the machine that runs JMeter 
e the port you setup in JMeter Server Proxy 


Есеке] (Bo. 


Cia ae - 


文件 编辑 Search 运行 选项 帮助 


7.16 选择 测试 计划 模板 


Е n Test Plan 


КЖ HTTP Request Defaults 
| DR HTTP Cookie Manager 
ФӘ Thread Group 
| ТӘ Recording Controller 
ай View Results Tree 
Ei HITP(S) Test Script Recor 
\@ View Results Tree 


用 户 定义 的 变量 


089 äU OO|+ -|> b @ O/ We t.i Bl Poo Доол 


WEE: [User Defined Variables 


注释 : 


用 户 定义 的 变量 


Descripti 


7.17 用 模板 Recording 创建 的 测试 计划 


(2) 设置 浏览 器 代理 服务 器 (以 Firefox 浏览 器 为 例 ) 。 

Ф Mik Firefox 浏览 器 右上 角 的 打开 “菜单 ”>“ 选 项 "菜单 项 。 
© 找到 网 络 代理 选项 , 单 击 * 设 置 ?按钮 。 
@ 选择 “手动 代理 配置 ”, 输 入 HTTP 代理 主机 名 称 和 端口 ,如 图 7. 19 所 示 。 


(3) 用 浏览 器 访问 被 测 应 用 (注意 到 测试 计划 树 中 Recording Controller 元 件 下 将 会 自 


动 增加 一 些 样本 元 件 , 如 图 7. 20 所 示 ) 。 
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Sp Test Plan 
Ё Ё User Defined Variables 
QE HTTP Request Defaults 
QA HTTP Cookie Manager 


27 Recording Controller 
{ет Results Tree 


ew Results Tree 


Test Plan Creation 
Test plan content 
Вена: 使 用 录制 控制 器 jË 


8: [Put each group an a new trae ”| 团 记 录 HTTP 信 息 头 EMA кеек matching 


HTTP Sampler settings 


Create new transaction after request (ns): 
回 从 Eme 文 件 获取 所 有 内 合 的 资源 

四 自动 重 定向 

Ij Use KeepAlive 

Туре: 


图 7.18 HTTP 代理 服务 器 


配置 访问 互联 网 的 代理 服务 器 
不 使 用 代理 服务 器 (Y) 
自动 检测 此 网 络 的 代理 设置 (W) 
使 用 系统 代理 设置 (U) 
е Fane) I ü Š - Е 7 
HTTP 代理 00 | localhost we) 8888 
Y 为 所 有 协议 使 用 相同 代理 服务 器 (S) 
SSL 代 理 localhost ЮГО) 8888 


ETP 代理 localhost OR) 8888 


SOCKS 主机 localhost mOM 8888 


SOCKS v4 9 SOCKS Y5 
不 使 用 代理 (N) 
localhost,127.0.0.1 


RE 取消 жн) 


7.19 Firefox 浏览 器 代理 服务 器 设置 
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文件 编辑 Search 运行 选项 帮助 
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图 7.20 录制 控制 器 记录 的 样本 元 件 
(4) 停止 HTTP 代理 服务 器 的 工作 ,保存 测试 计划 。 


(.3 JMeter 操作 演练 


本 节 介 绍 Web 应 用 测试 计划 模板 的 使 用 .JMeter 的 运行 模式 。 
7.3.1 Web 应 用 测试 计划 模板 


JMeter 提供 了 两 个 Web 应 用 测试 计划 模板 : Building a Web Test Plan 和 Building an 
Advanced Web Test Plan。 以 下 以 Building a Web Test Plan 为 例 ,讲解 Web 应 用 的 基本 测试 。 

(1) 选择 "文件 ”一 Templates 菜单 项 ,在 弹出 的 Templates 窗口 选择 模板 Building a 
Web Test Plan, 如 图 7. 21 所 示 。 


Select Template Building a Web Test Plan -— - 


Test plan from Building a Web Test Plan section in user's 


图 7.21 Building a Web Test Plan 模板 
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(2) 单 击 Create 按钮 , 即 可 创建 一 个 Web 应 用 的 基本 测试 计划 ,如 图 7. 22 所 示 。 


E 


文件 SB Search 运行 РЫЙ ER = 
П@аы& оо + - |> b @@|# # | e + |: B ро:ог:05 Д о 0/50 图 
= Z build-web-test-plan 
| та HTTP Re t Default: ыш! 一 一 一 
pu efa 一 一 — — 
| Я НТТР Cookie Manager || 名 称 : [Scenario 1 1 
HTTP Header Manager д ц 
| S2 Bone Page sayy, Virtual Users Running Scenario 1. 
= татат Маке test last 1 minute (see Scheduler) 
© шт 3 at 在 取样 器 错误 后 要 执行 的 动作 
| na rem 404 加 继续 Ө Start Next Thread Loop © 停止 线程 © 停止 测试 © Stop Test Now 
“lob View Results Tree 
线程 属性 
线程 数 : [50 
Ramp-Up Period (in seconds): 5 
循环 次 数 do 
Delay Thread creation until needed 
EL. 
调度 器 配置 
持续 时 间 ( 秒 〉|60 
启动 延迟 (H) 5 
D б 


7.22 Web 应 用 的 基本 测试 计划 


(3) 在 测试 计划 树 中 选择 配置 元 件 HTTP Request Defaults ,在 配置 元 件 HTTP 请 求 
默认 值 的 Basic 标签 页 中 可 以 设置 被 测 Web 应 用 的 服务 器 名 称 、. 协议. 端口 ,在 Advanced 
标签 页 中 可 以 设置 代理 服务 器 ,如 图 7.23 和 图 7.24 所 示 。 


foo:01:05 Д о 0/50 Q3) 


Bg bulld-veb-test-plan 
ry Scenario 1 


Tun Cookie Manager 
HTTP Header Manager 
5 2 Hone Page 


f: HTTP Request Defaults 


Notice Timeouts: 
О, Assertion | 注释 : Read to 30s 
9:47 ThinkTinels 


URT 
5.47 Page Returning 404 
О, Assertion 404 Basic 
& View Results Tree Yeb 服 务 器 


[wits мая авна: [ovvhacolieaccm  |щп | _ 


Connect to 5s 


]Content encodins:| | 


同 请 求 一 起 发 送 参数 : 
值 编码 ? | 包含 等 于 ? 


7.23 ”配置 元 件 (HTTP 请 求 默认 值 ) 的 Basic 标签 页 


在 线程 组 Scenario 1 中 后 续 的 HTTP 请 求 将 会 使 用 这 些 默 认 值 。 


(4) 在 测试 计划 树 中 选择 取样 器 元 件 (HTTP 请 求 ) Home Page, 可 以 设置 要 测试 的 
页 面 。 
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| zs. 
S ETIP Cookie anager || ^^ (BITE Request Defaults 
SÈ HTTP Header Manager 


Notice Timeouts: 
BA Hone Page 
-QA Assertion | 注释 : Read to 30s 
G- ThinkTinels 
— Connect to 5s 


9:47 Page Returning 404 
©, Assertion 404 [Basic] Advanced 


lá View Results Tree Client implementation — — — — Tineouts (ailliseconds) 
Implementation: [ccs =) Connect: 5000 | Response: [30000 
Embedded Resources from HTML Files 
加 从 HTHL 文 件 获取 所 有 内 合 的 资源 [Parallel downloads. Number: [i] URLs must match: 
Source address — 
JIP/Hostnane ~, 
Proxy Server 
ES mos. | яка | 
其 他 任务 一 
Save response as MDS hash? 


图 7.24 配置 元 件 (HTTP 请 求 默 认 值 ) 的 Advanced 标签 页 


(5) 在 测试 计划 树 中 选择 响应 断言 Assertion ,可 以 设置 要 测试 的 响应 字段 、 模 式 匹配 
规则 等 ,如 图 7.25 所 示 。 


Bg bulld-veb-test-pl 
© @ Scenario 1 
JE HTTP Request Ú 
|Z HTTP Cookie W. 
Ё HTTP Header W 


9.47 ThinkTinels 


© Nain sample and sub-samples Nain sample only © Sub-samples only © JMeter Variable Name to 
BA Page Returni: 


©, Assertion 4] 要 测试 的 响应 字段 
loi View Results Tre| 加 响应 文本 日 响应 代码 日 响应 信息 
© Request Headers 日 URL 样 本 © Document (text) 


© Request Data 
模式 区 配 规则 

加 包括 ОПЕ G Equals O Substring OF ORË 
要 测试 的 模式 


要 测试 的 模式 


T Huizhou Economics And Polytechnic College 


7.25 响应 断言 的 设置 

(6) 右 击 测试 计划 树 中 的 Scenario 1, 通 过 右键 快捷 命令 添加 一 个 监听 器 Response 
Time Graph. 

(7) 单 击 工具 栏 中 的 “启动 ”按钮 ,开始 执行 测试 。 


(8) 选择 测试 计划 树 中 的 监听 器 元 件 Response Time Graph. i Graph 标签 ,其 中 显 
示 了 测试 结果 的 响应 时 间 图 ,如 图 7. 26 所 示 。 
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PA 7.26 响应 时 间 图 


7.3.2 JMeter 的 运行 模式 


除了 jmeter. bat 文件 以 外 ,在 bin 文件 夹 中 还 有 几 个 Windows 脚本 文件 。 这 些 脚本 文 
件 的 作用 如 下 : 

。 jmeter. bat 一 一 启动 JMeter, 有 Windows 命令 行 窗口 (默认 启动 GUI 模式 ) 。 

* jmeterw. cmd 一 一 启动 JMeter, 无 Windows 命令 行 窗口 (默认 启动 GUI 模式 ) 。 

* jmeter-n. cmd 一 一 以 Non-GUI 模式 执行 JMX 文件 设 定 的 测试 。 

* jmeter-n-r. cmd 一 一 以 Non-GUI 模式 远程 执行 JMX 文件 设 定 的 测试 。 

。 jmeter-t. cmd 一 一 以 GUI 模式 执行 JMX 文件 设 定 的 测试 。 

。 jmeter-server. bat 一 一 以 服务 器 模式 启动 JMeter。 

e mirror-server, cmd 一 一 以 Non GUI 模式 启动 JMeter 镜像 服务 器 。 

。 shutdown, cmd 一 一 运行 Shutdown 客户 端 ,正常 终止 Non_GUI 实例 。 
stoptest. cmd 一 一 运行 Shutdown 客户 端 ,强行 终止 Non. GUI 实例。 

GUI 模式 用 于 开发 .调试 测试 ,执行 测试 时 应 当 用 Non 一 GUI 模式。 例如 ,使 用 如 下 命 
令 执 行文 件 PerformanceTestPlanMemoryThread. jmx 设 定 的 测试 : 


jmeter — n PerformanceTestPlanMemoryThread. jmx 


结果 如 图 7. 27 所 示 。 

jmeter. bat 文件 会 调用 其 他 的 脚本 文件 。 因 此 ,只 需要 给 定 参 数 运行 jmeter. bat 就 可 
以 了 。jmeter. bat 命令 行 参数 如 下 : 

-n 一 一 指定 JMeter 以 Non_GUI 模式 运行 。 

-t 一 一 指定 包含 测试 计划 的 JMX 文件 名 。 

-| 一 一 指定 记录 测试 结果 的 JTL 文件 名 。 
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ga SER: C\Windows\system32\emd.exe, [EP 


pache-Jjneter-4.@\bin\exanples>jneter-n PerforaanceTestPlanfenoryIhread. jax 


hed: 
Finished: 


E Б " ам Y tive: Finished: 


hed: 
Finished: 


图 7.27 以 Non GUI 模式 运行 JMeter 


j 指定 JMeter 测试 执行 时 的 日 志文 件 

r 在 JMeter 属性 remote_hosts 指定 的 服务 器 上 执行 测试 

R 指定 一 组 远程 服务 器 ,在 指定 的 一 组 远程 服务 器 上 执行 测试 

g 指定 测试 报告 的 CSV 文件 路 径 , 将 测试 报告 转换 成 测试 报告 仪表 板 (HTML 格 
式 测试 报告 )。 不 能 与 -n 参数 一 起 使 用 

e 在 测试 完成 后 生成 测试 报告 仪表 板 ,需要 与 数 一 起 使 用 。 
测试 完成 后 测试 报告 仪表 板 存 放 的 RA Je ,文件 夹 必 须 不 存在 或 者 是 空 的 。 

H 一 一 指定 代理 服务 器 的 主机 名 称 或 IP 地 址 

P 一 一 指定 代理 服务 器 的 端口 号 

JMeter 的 安装 目录 中 有 一 个 文件 夹 bin\examples, 这 是 一 个 测试 Tomcat 附带 的 Web 

示例 的 测试 示例 。 启 动 Tomcat 后 ,执行 如 下 命令 : 


jmeter – g PerformanceTestPlanMemoryThread. jtl 
- t PerformanceTestPlanMemoryThread. jmx 


将 在 bin\report— output 文件 夹 下 生成 HTML 格式 的 报告 ,在 浏览 器 上 浏览 测试 报 
告 , 如 图 7.28 所 示 。 
执行 如 下 命令 : 
jmeter — п - t PerformanceTestPlanMemoryThread. jmx 
-e — 1 result. jt1 — o C: /apache – jmeter - 4. 0/bin/examples/report 
将 以 Non. GUI 模式 执行 PerformanceTestPlanMemoryThread. jmx 测试 ,生成 的 测试 


报告 为 result. j 世 ,测试 执行 完成 后 将 把 测试 报告 转换 成 测试 报告 仪表 板 , 存 放 在 report Ж 
HX P. 
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图 7.28 测试 报告 仪表 板 


Emez 


任务 1: 安装 JMeter, 记 录 安 装 过 程 ,编写 安装 说 明 书 。 
任务 2: 使 用 模板 Recording 创建 一 个 测试 计划 ,对 http://www. 12306. cn/ 首 页 进行 


测试 ,录制 测试 脚本 。 


任务 3: 使 用 模板 Building a Web Test Plan 创建 一 个 测试 计划 ,对 http://www. 
12306. cn/ 首 页 进行 测试 ,要 求 能 够 显示 响应 时 间 图 。 


本 章 主要 内 容 

安全 性 测试 简介 

安全 性 测试 工具 

ZAP 安全 性 测试 演练 

安全 性 测试 是 非 功 能 测试 ,安全 性 测试 是 系统 测试 的 主要 内 容 之 一 。 由 于 安全 性 测试 
与 系统 功能 测试 需要 采用 完全 不 同 的 测试 方法 ,并 且 安 全 性 测试 在 互联 网 时 代 的 重要 性 越 
来 越 受 到 人 们 的 关注 ,所 以 我 们 用 一 章 的 篇 幅 专 门 讨论 安全 性 测试 。 


6.1 什么 是 安全 性 测试 
本 节 简 要 介绍 什么 是 安全 性 测试 以 及 一 些 常见 的 安全 性 测试 工具 。 


8.1.1 安全 测试 简介 


软件 安全 测试 是 评估 和 测试 系统 ,发 现 安全 风险 和 系统 及 其 数据 的 脆弱 性 的 过 程 。 目 
前 还 没有 安全 测试 的 严格 定义 ,一 般 来 说 ,可 以 将 安全 评估 定义 为 漏洞 的 分 析 和 发 现 而 不 试 
图 实际 利用 这 些 漏 洞 ,将 安全 测试 定义 为 发 现 和 尝试 利用 这 些 漏洞 。 

安全 测试 一 般 包 含 如 下 几 个 方面 : 

° 脆弱 性 评估 对 系统 进行 扫描 和 分 析 以 发 现 安全 问题 。 

。 渗透 测试 一 一 通过 模拟 恶意 攻击 者 的 分 析 和 攻击 对 系统 进行 安全 测试 。 

。 运行 时 测试 一 一 从 最 终 用 户 的 角度 对 系统 进行 分 析 和 安全 测试 。 

。 代码 审查 一 一 针对 特定 的 安全 漏洞 ,对 系统 代码 进行 详细 的 审查 和 分 析 。 

有 两 个 国际 组 织 WASC(Web Application Security Consortium, Web 应 用 安全 联盟 ， 
http://www. webappsec. org) 和 OWASP(Open Web Application Security Project, 开放 
Web 应 用 安全 项 目 ,https://www. owasp. org) 在 呼吁 企业 加 强 应 用 安全 意识 和 指导 企业 
开发 安全 的 Web 应 用 方面 ,起 到 了 重要 的 作用 。 

WASC 是 一 个 由 安全 专家 ,行业 顾问 和 诸多 组 织 的 代表 组 成 的 国际 团体 。WASC 组 织 
的 关键 项 目 之 一 是 “Web 安全 威胁 分 类 ”, 也 就 是 将 Web 应 用 所 受到 的 威胁 、 攻 击 进行 说 明 
并 归纳 成 具有 共同 特征 的 分 类 。 该 项 目的 目的 是 针对 Web 应 用 的 安全 隐患 ,制定 和 推广 行 
业 标 准 术 语 。 


mem же Л ` 


2010 年 WASC 71р f “Web 安全 威胁 分 类 ?版 本 2.00, "Web 安全 威胁 分 类 ”中 使 用 


了 如 下 术语 : 
。 威胁 (Threat) 潜在 的 安全 隐患 。 
* 影响 (Impact) 一 一 组 织 或 系统 受到 攻击 或 存在 安全 缺陷 的 后 果 。 
* 攻击 (Attack) 一 一 一 组 定义 良好 的 操作 ,如 果 成 功 ,将 导致 对 资产 的 损坏 或 不 希望 
的 操作 。 


. 


漏洞 (Vulnerability) 一 一 可 以 利用 的 缺陷 ,未 授权 人 能 够 利用 这 样 的 缺陷 修改 和 访 
问 受 保护 的 数据 或 执行 不 被 允许 的 操作 。 

缺陷 CWeakness) 一 一 软件 缺陷 ,在 一 定 的 条 件 下 ,将 会 导致 软件 漏洞 。 缺 陷 可 能 存 
在 于 设计 、 实 现 或 软件 开发 生命 周期 的 其 他 阶段 。 

“Web 安全 威胁 分 类 ”版 本 2. 00 列 出 了 25 种 攻击 .15 种 缺陷 ,如 表 8.1 和 表 8.2 所 示 。 


表 8.1 25 种 攻击 


序 号 攻击 (Attacks) 简短 描述 

一 种 使 用 Web 站 点 的 自身 特性 和 功能 来 对 访 
问 控制 机 制 进行 消耗 ,欺骗 或 规避 的 攻击 方法 
猜测 个 人 的 用 户 名 密码 、 信 用 卡号 或 密 钥 的 自 
动 反复 试验 过 程 

通过 覆盖 内 存 中 超过 所 分 配 缓冲 区 大 小 的 部 分 
的 数据 来 修改 应 用 程序 流 的 攻击 

一 种 用 于 诱 使 用 户 相信 Web 站 点 上 出 现 的 特 
定 内 容 合法 而 不 是 来 自 外 部 源 的 攻击 方法 

一 种 通过 推断 或 猜测 用 于 识别 特定 会 话 或 用 户 
的 唯一 值 来 盗 取 或 仿冒 Web 站 点 用 户 的 方法 
一 种 强制 Web 站 点 回 传 攻击 者 提供 的 可 执行 
代码 ( 装 入 到 用 户 浏览 器 中 ) 的 攻击 方法 

一 种 涉及 强制 受害 者 在 目标 不 知情 或 无 意愿 的 
7 跨 站 点 请 求 伪造 (Cross Site Request Forgery) | 情况 下 向 其 发 送 HTTP 请 求 ,以 便 以 受害 者 身 
份 执行 操作 的 攻击 

一 种 旨 在 阻止 Web 站 点 为 正常 用 户 活动 提供 
服务 的 攻击 方法 

攻击 者 的 最 常用 方法 是 首先 占用 目标 的 Web 
范围 ,然后 枚 举 尽 可 能 多 的 信息 。 通 过 此 信息 ， 
攻击 者 可 以 制定 将 有 效 利用 目标 主机 所 使 用 的 
软件 类 型 /版 本 中 的 漏洞 的 准确 攻击 方案 

通过 使 用 字符 串 格式 化 库 功 能 访问 其 他 内 存 空 
间 来 修改 应 用 程序 流 的 攻击 

一 种 通过 期 望 (或 允许 ) 来 自 服务 器 的 单个 响应 
11 HTTP 响应 走私 (HTTP Response Smuggling) | 的 中 间 HTTP 设备 将 来 自 该 服务 器 的 两 个 
HTTP 响应 “走私 ”到 客户 机 的 方法 

HTTP 响应 分 割 的 实质 是 攻击 者 能 够 发 送 回 强 
制 Web 服务 器 形成 输出 流 的 单个 HTTP 请 
求 ,然后 该 输出 流 由 目标 解释 为 两 个 而 不 是 一 
个 HTTP 响应 


1 功能 滥用 (Abuse of FunctionalitLy) 


2 暴力 (Brute Force) 


3 S wb IX Ré Hi (Buffer Overflow) 


4 内 容 欺 骗 (Content Spoofing) 


5 和 凭证 /会 话 预 测 (Credential/ Session Prediction) 


6 跨 站 点 脚本 (Cross-Site Scripting) 


8 拒绝 服务 (Denial of Service) 


9 指纹 图 谱 (Fingerprinting) 


10 格式 化 字符 串 (Format String) 


12 HTTP 响应 分 割 (HTTP Response Splitting) 
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BR 


Wi (Attacks) 


简短 描述 


HTTP 请 求 走私 (HTTP Request Smuggling) 


一 种 滥用 两 台 HTTP 设备 之 间 的 非 КЕС 兼容 
HTTP 请 求 的 解析 差异 来 “通过 ”第 一 台 设 备 将 
请 求 “走私 ”到 第 二 台 设 备 的 攻击 方法 


HTTP 请 求 分 割 (HTTP Request Splitting) 


HTTP 请 求 分 割 是 一 种 实现 强制 浏览 器 发 送 任 
意 HTTP 请 求 , 从 而 施加 XSS 和 毒害 浏览 器 
缓存 的 攻击 


整数 溢出 (Integer Overflows) 


当 算术 运算 (如 乘法 或 加 法 ) 的 结果 超过 用 于 存 
储 该 运算 的 整数 类 型 的 最 大 大 小 时 发 生 的 情况 


LDAP 注入 (LDAP Injection) 


一 种 用 于 对 通过 用 户 提供 的 输入 来 构建 LDAP 
语句 的 Web 站 点 加 以 利用 的 攻击 方法 


邮件 命令 注入 (Mail Command Injection) 


一 种 用 于 对 通过 用 户 提供 的 未 适当 清理 的 输入 
来 构造 IMAP/SMTP 语句 的 邮件 服务 器 和 
Web 邮件 应 用 程序 加 以 利用 的 攻击 方法 


空 字 节 注 入 (Null Byte Injection) 


一 种 用 于 通过 将 URL 编码 的 空 字 节 字 符 添 加 
到 用 户 提供 的 数据 来 绕 过 Web 基础 结构 中 的 
清理 检查 过 滤器 的 主动 攻击 方法 


操作 系统 命令 (OS Commanding) 


一 种 用 于 通过 操纵 应 用 程序 输入 来 执行 操作 系 
统 命令 ,从 而 对 Web 站 点 加 以 利用 的 攻击 方法 
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Sf iid Б] (Path Traversal) 


这 是 一 种 强制 对 可 能 驻 留 在 Web 文档 根 目录 
外 的 文件 .目录 和 命令 进行 访问 的 方法 
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可 预测 的 资源 位 置 (Predictable Resource 


Location) 


一 种 用 于 通过 做 出 有 根据 的 猜测 来 显露 所 隐藏 
Web 站 点 内 容 和 功能 的 攻击 方法 
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远程 文件 包含 (Remote File Inclusion,RFD 


一 种 用 于 利用 Web 应 用 程序 中 的 “动态 文件 包 
含 " 机 制 骗取 应 用 程序 包含 具有 恶意 代码 的 远 
程 文件 的 攻击 方法 


23 


路 由 迁 回 (Routing Detour) 


一 种 可 以 注入 或 “劫持 ”中介 以 将 敏感 信息 路 由 
到 外 部 位 置 的 “中 间 人 ”攻击 
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会 话 定 置 (Session Fixation) 


将 用 户 的 会 话 标识 强制 变 为 显 式 值 的 一 种 攻击 
方法 。 在 用 户 的 会 话 标识 定 置 后 ,攻击 者 会 等 
待 其 登录 。 一 旦 用 户 进行 登录 ,攻击 者 就 会 使 
用 预定 义 的 会 话 标识 值 来 夺取 其 在 线 身 份 
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SOAP 数组 滥用 (SOAP Array Abuse) 


一 种 期 望 数组 可 以 是 XML DoS 攻击 目标 的 
Web 服务 ,方法 是 强制 SOAP 服务 器 在 机 器 内 
存 中 构建 巨大 的 数组 ,从 而 因 内 存 预 分 配 而 在 
机 器 上 施加 DoS 条 件 


em ”安全 性 测试 <7 


表 8.2 15 种 缺陷 


В (Weaknesses) 


简短 描述 


应 用 错误 配置 (Application Misconfiguration) 


这 些 攻击 对 在 Web 应 用 程序 中 找到 的 配置 漏 
洞 加 以 利用 


目录 索引 (Directory Indexing) 


自动 目录 列表 /索引 是 一 项 Web 服务 器 功能 ， 
此 功能 会 在 没有 常规 基础 文件 (index. html/ 
home. html/default. htm) 的 情况 下 列 出 所 请 求 
目录 内 的 所 有 文件 。 由 于 与 特定 Web 请 求 相 
结合 的 软件 漏洞 ,因此 可 能 会 列 出 意外 目录 


文件 系统 许可 权 不 当 (Improper Filesystem 


Permissions) 


对 Web 应 用 程序 的 机 密 性 、 完 整 性 和 可 用 性 的 
威胁 。 当 在 文件 文件 夹 和 符号 链接 上 设置 的 
文件 系统 许可 权 不 正确 时 会 发 生 此 问题 


输入 处 理 不 当 (Improper Input Handling) 


如 今 在 应 用 程序 之 间 识 别 的 最 常见 漏洞 之 一 。 
输入 处 理 不 当 是 系统 和 应 用 程序 中 存在 的 关键 
漏洞 的 主要 原因 


输出 处 理 不 当 (Improper Output Handling) 


如 果 应 用 程序 未 适当 处 理 输出 ,那么 输出 数据 
的 使 用 可 能 会 导致 应 用 程序 开发 者 从 未 意图 的 
漏洞 和 操作 


信息 泄露 (Information Leakage) 


一 种 应 用 程序 会 揭示 敏感 数据 (如 Web 应 用 程 
序 、 环 境 或 特定 于 用 户 的 数据 的 技术 详细 信息 ) 
的 应 用 程序 漏洞 


不 安全 索引 (Insecure Indexing) 


对 Web 站 点 的 数据 机 密 性 的 威胁 。 通 过 对 本 
不 应 公开 可 访问 的 文件 具有 访问 权 的 过 程 来 索 
引 Web 站 点 内 容 有 可 能 会 泄露 有 关 此 类 文件 
的 存在 性 和 有 关 其 内 容 的 信息 。 在 建立 索引 的 
过 程 中 ,此 类 信息 通过 索引 过 程 进行 收集 和 存 
储 , 有 决心 的 攻击 者 之 后 通常 可 以 通过 对 搜索 
引擎 的 一 系列 查询 来 检索 此 类 信息 


不 充分 反 自 动 化 (Insufficient Anti-automation) 


当 Web 站 点 允许 攻击 者 将 仅 应 手动 执行 的 过 
程 自动 化 时 发 生 


不 充分 认证 (Insufficient Authentication) 


Web 站 点 允许 攻击 者 访问 敏感 内 容 或 功能 而 
不 必 进 行 适 当 认证 


不 充分 授权 (Insufficient Authorization) 


当 Web 站 点 允许 对 应 该 需要 更 强 访问 控制 限 
制 的 敏感 内 容 或 功能 进行 访问 时 发 生 


不 充分 密码 恢复 (Insufficient Password 


Recovery) 


当 Web 站 点 允许 攻击 者 非法 获取 、 更 改 或 恢复 
其 他 用 户 的 密码 时 发 生 


不 充分 过 程 验 证 (Insufficient Process 
Validation) 


当 Web 站 点 允许 攻击 者 绕 过 或 规避 应 用 程序 
的 预期 流 控制 时 发 生 


不 充分 会 话 到 期 (Insufficient Session 
Expiration) 


当 Web 站 点 允许 攻击 者 复 用 旧 的 会 话 赁 证 或 
会 话 标识 来 进行 授权 时 发 生 


传输 层 保 护 不 足 (Insufficient Transport 


Layer Protection) 


允许 向 不 可 信 第 三 方 显 式 通信 


服务 器 配置 错误 (Server Misconfiguration) 


利用 在 Web 服务 器 和 应 用 程序 服务 器 中 找到 
的 配置 漏洞 


208 


x 


软件 测试 实战 教程 


详 见 “Web 安全 威胁 分 类 ”版 本 2. 00. 

OWASP 致力 于 使 组 织 能 够 构思 、 开 发 获取 、 运 行 和 维护 可 信任 的 应 用 程序 。 它 的 最 
重要 的 项 目 之 一 是 “Web 应 用 的 十 大 安全 隐患 "。“Web 应 用 的 十 大 安全 隐患 ”总结 了 当前 
Web 应 用 最 常 受到 的 十 种 攻击 手段 ,并 且 按 照 攻 击发 生 的 概率 进行 了 排序 。“Web 应 用 的 
十 大 安全 隐患 "最 初 目 标 只 是 为 了 提高 开发 人 员 和 管理 人 员 的 安全 意识 ,但 它 已 经 成 为 了 实 
际 的 应 用 安全 标准 。 

“Web 应 用 的 十 大 安全 隐患 "每 隔 几 年 就 会 发 布 一 个 新 版 本 ,最 新 版 本 2017 版 列 出 的 
Web 应 用 的 十 大 安全 隐患 如 下 : 


注入 。 将 不 受信 任 的 数据 作为 命令 或 查询 的 一 部 分 发 送 到 解析 器 时 ,会 产生 诸如 
SQL iE A NoSQL iE A ,OS E A fll LDAP 注入 的 缺陷 。 攻 击 者 的 恶意 数据 可 以 诱 
使 解析 器 在 没有 适当 授权 的 情况 下 执行 非 预期 命令 或 访问 数据 。 

失效 的 身份 认证 。 通 常 ,通过 错误 使 用 应 用 程序 的 身份 认证 和 会 话 管理 功能 ,攻击 
者 能 够 破译 密码 、 密 钥 或 会 话 令 牌 ,或 者 利用 其 他 开发 缺陷 来 暂时 性 或 永久 性 冒充 
其 他 用 户 的 身份 。 

敏感 数据 泄露 。 许 多 Web 应 用 程序 和 API 都 无 法 正确 保护 敏感 数据 ,例如 ,财务 数 
据 、 医 疗 数据 和 PII 数据。 攻击 者 可 以 通过 窃取 或 修改 未 加 密 的 数据 来 实施 信用 卡 
诈骗 .身份 盗 欠 或 其 他 犯罪 行为 。 未 加 密 的 敏感 数据 容易 受到 破坏 ,因此 ,需要 对 敏 
感 数据 加 密 , 这 些 数据 包括 传输 过 程 中 的 数据 、 存 储 的 数据 以 及 浏览 器 的 交互 数据 。 
XML 外 部 实体 (XXE)。 许 多 较 早 的 或 配置 错误 的 XML 处 理 器 评估 了 XML 文件 
中 的 外 部 实体 引用 。 攻 击 者 可 以 利用 外 部 实体 窍 取 使 用 URI 文件 处 理 器 的 内 部 文 
件 和 共享 文件 ,监听 内 部 扫描 端口 .执行 远程 代码 和 实施 拒绝 服务 攻击 。 
失效 的 访问 控制 。 未 对 通过 身份 验证 的 用 户 实施 恰当 的 访问 控制 。 攻 击 者 可 以 利 
用 这 些 缺 陷 访 问 未 经 授权 的 功能 。 

安全 配置 错误 。 安 全 配置 错误 是 最 常见 的 安全 问题 ,这 通常 是 由 于 不 安全 的 默认 配 
置 、 不 完整 的 临时 配置 .开源 云 存储 、 错 误 的 НТТР 标 头 配置 以 及 包含 敏感 信息 的 
详细 错误 信息 所 造成 的 。 因 此 .我 们 不仅 需要 对 所 有 的 操作 系统 框架 、 库 和 应 用 程 
序 进行 安全 配置 ,而 且 必 须 及 时 修补 和 升级 它们 。 

跨 站 脚本 (XSS)。 当 应 用 程序 的 新 网 页 中 包含 不 受信 任 的 、 未 经 恰当 验证 或 转 义 的 
数据 时 ,或 者 使 用 可 以 创建 HTML 或 JavaScript 的 浏览 器 API 更 新 现 有 的 网 页 时 ， 
就 会 出 现 XSS 缺陷 。XSS 让 攻击 者 能 够 在 受害 者 的 浏览 器 中 执行 脚本 ,并 劫持 用 
户 会 话 、 破 坏 网 站 或 将 用 户 重 定 向 到 恶意 站 点 。 

不 安全 的 反 序列 化 。 不 安全 的 反 序 列 化 会 导致 远程 代码 执行 。 即 使 反 序 列 化 缺陷 
不 会 导致 远程 代码 执行 ,攻击 者 也 可 以 利用 它们 来 执行 攻击 ,包括 重播 攻击 、 注 入 攻 
击 和 特权 升级 攻击 。 

使 用 含有 已 知 漏洞 的 组 件 。 组 件 ( 例 如 , 库 、 框 架 和 其 他 软件 模块 ) 拥 有 和 应 用 程序 
相同 的 权限 。 如 果 应 用 程序 中 含有 已 知 漏洞 的 组 件 被 攻击 者 利用 ,那么 可 能 会 造成 
严重 的 数据 丢失 或 服务 器 接管 。 同 时 ,使 用 含有 已 知 漏洞 的 组 件 的 应 用 程序 和 API 
可 能 会 破坏 应 用 程序 防御 、 造 成 各 种 攻击 并 产生 严重 影响 。 

不 足 的 日 志 记 录 和 监控 。 不 足 的 日 志 记 录 和 监控 ,以 及 事件 响应 缺失 或 无 效 的 集 
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成 ,使 攻击 者 能 够 进一步 攻击 系统 、 保 持 持续 性 或 转向 更 多 系统 ,以 及 算 改 ,提取 或 
销毁 数据 。 大 多 数 缺陷 研究 显示 ,缺陷 被 检测 出 的 时 间 超 过 200 天 , 且 通 常 通 过 外 
部 检测 方 检测 ,而 不 是 通过 内 部 流程 或 监控 检测 。 


8.1.2 安全 性 测试 工具 


有 很 多 的 安全 性 测试 工具 ,包括 商业 安全 性 测试 工具 和 开源 安全 性 测试 工具 。 
1. OWASP ZAP 


ZAP 是 OWASP 旗下 的 开源 渗透 测试 工具 ,专门 针对 Web 应 用 进行 渗透 测试 。ZAP 
为 开发 者 、 安 全 测试 专员 安全 测试 专家 提供 了 一 种 安全 测试 和 评估 工具 。ZAP 是 跨 平 台 
的 ,在 主要 的 操作 系统 和 Docker 环境 下 都 可 以 使 用 ZAP。 可 以 从 ZAP 市 场 免 费 获得 各 种 
附加 工具 。 

ZAP 是 所 谓 的 “中 间 人 代理 ”, 它 位 于 测试 员 的 浏览 器 和 Web 应 用 程序 之 间 , 以 便 拦截 
和 检查 浏览 器 和 Web 应 用 程序 之 间 发 送 的 消息 。 如 果 需 要 则 修改 内 容 , 然 后 将 这 些 数据 包 
转发 给 目标 服务 器 处 理 。 它 可 以 用 作 独 立 的 应 用 程序 ,也 可 以 作为 守护 进程 。 

详 见 官网 https://www. owasp. org/index. php/OWASP Zed Attack Proxy Project, 


2. Nmap 


Nmap 是 一 款 开 源 的 网 络 发 现 和 安全 审计 工具 。 其 基本 功能 包括 : 

CD 探测 主机 是 否 在 线 。 

(2) 扫描 主机 端口 , 嗅 探 所 提供 的 网 络 服务 (包括 应 用 名 称 和 版 本 信息 )。 

(3) 推断 主机 所 用 的 操作 系统 及 版 本 信息 。 

(4) 探测 使 用 的 防火 墙 / 包 过 滤器 的 类 型 。 

(5) 探测 其 他 各 类 信息 , 且 可 定制 扫描 策略 。 

Nmap 支持 多 种 平台 (Linux、Windows 和 Mac OS XA); 支持 命令 行 和 图 形 用 户 界面 
(GUD; 可 灵活 绑 定 其 他 工具 ,如 Nping，Nidiff, Ncat 等 。 

详 见 官网 https://nmap. org/. 


3. OpenVAS 


OpenVAS 号 称 世 界 最 先进 的 开源 漏洞 扫描 和 管理 工具 。OpenVAS 包括 一 个 中 央 服 
务 器 和 一 个 图 形 化 的 前 端 。 其 核心 部 件 是 中 央 服 务 器 ,包括 一 套 网 络 漏洞 测试 程序 ,可 以 检 
测 远 程 系 统 和 应 用 程序 中 的 安全 问题 。 

详 见 官网 https://openvas. org/。 


4. OSSEC 


OSSEC 是 一 个 可 扩展 的 、 多 平台 、 开 放 源 码 的 基于 主机 的 入 侵 检测 系统 (Host-based 
Intrusion Detection System . HIDS)。 它 具有 强大 的 相关 性 和 分 析 引 擎 ,集成 日 志 分 析 、 文 
件 完整 性 检查 、Windows 注册 表 监 视 、 集 中 策略 执行 、rootkit 检测 、 实 时 警报 和 主动 响应 。 
它 运 行 在 大 多 数 操作 系统 上 ,包括 Linux, OpenBSD, FreeBSD, Mac OS, Solaris 和 
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Windows。 
详 见 官网 http://www. ossec. net/。 


5. Metasploit 


Metasploit 是 一 个 渗透 测试 平台 ,有 助 于 发 现 、 利 用 和 验证 漏洞 。 该 平台 包括 开源 的 
Metasploit 框架 及 其 商业 配套 的 多 个 版 本 : Metasploit Pro, Express, Community 和 
Nexpose Ultimate, 

Metasploit 框架 是 商业 软件 Metasploit Pro、Express、Community 和 Nexpose Ultimate 
的 基础 , 它 提供 了 进行 渗透 式 测试 和 安全 审计 的 基础 架构 、 内 容 和 工具 。 

Metasploit 支持 Windows 和 Linux 操作 系统 。 

详 见 官网 https://www. metasploit. com/。 


6. Security Onion 


Security Onion 是 一 个 开源 的 入 侵 检测 、 企 业 安全 监控 和 日 志 管理 工具 。 它 包含 了 
Elasticsearch, Logstash, Kibana, Snort, Suricata , Bro, OSSEC, Sguil , Squert , NetworkMiner 
等 众多 安全 工具 。 

Security Onion 由 三 个 核心 部 分 组 成 : 全 包 捕 获 . 基 于 网 络 和 基于 主机 的 入侵 检测 系统 
(NIDS 和 HIDS) ,强大 的 分 析 工 具 。 但 是 它 仅 支持 Linux, 

详 见 官网 https://securityonion. net/ 。 


7. Snort 


Snort 是 一 个 开源 的 规则 驱动 的 基于 网 络 的 入侵 检测 系统 。 它 主要 有 三 个 用 途 : 直接 
数据 包 嗅 探 、 数 据 包 记录 和 全 面 的 网 络 入侵 防 御 。 

HSE G (Linux, FreeBSD, Windows) 。 

详 见 官网 https://www. snort. org/. 


8. Scapy 


Scapy 是 一 个 功能 强大 的 交互 式 数据 包 操 作 程序 。 它 能 够 伪造 或 解码 大 量 协 议 的 数据 
包 , 能 够 发 送 、 捕 提 数 据 包 、 匹 配 请 求 和 回复 等 。 它 可 以 轻松 地 处 理 大 多 数 经 典 任务 ,如 扫 
描 \ 跟 踪 .探测 .单元 测试 攻击 或 网 络 发 现 ( 它 可 以 取代 hping、nmap 的 85%、arpspoof、arp- 
sk.arping.tcpdump.tethereal.p0f 等 安全 工具 ) 。 它 也 在 大 多 数 其 他 工具 无 法 处 理 的 许多 
尘 定 任务 中 表现 得 很 好 ,例如 发 送 无 效 帧 .注入 自己 的 802. 11 帧 结合 不 同 的 技术 (VLAN 
跳 转 十 ARP 缓存 污染 `WEP 加 密 信道 上 的 VoIP 解码 ……) 等 。 

Scapy 是 用 Python 编写 的 ,可 以 运行 在 Python 2 和 Python 3 环境 下 。 

详 见 官网 https://scapy. net/ 。 


9. IBM AppScan 


IBM AppScan 是 一 种 商业 自动 化 Web 应 用 程序 安全 性 测试 工具 ,能 够 连续 、 自 动 地 审 
查 Web 应 用 程序 ,测试 安全 性 问题 ,并 生成 包含 修订 建议 的 行动 报告 ,简化 修复 过 程 。 


Be “安全 性 测试 


IBM AppScan 提供 了 下 列 功 能 : 

1) 可 扩展 的 应 用 安全 测试 

可 扩展 的 企业 架构 能 支持 多 个 应 用 安全 测试 人 员 。AppScan 提供 用 于 测试 Web, ЗЕ 
Web 以 及 移动 应 用 的 方法 ,包括 动态 .静态 和 交互 性 分 析 。 它 可 以 基于 IBM X-Force 数据 
库 , 对 网 站 进行 扫描 ,寻找 恶意 网 站 链接 ,结合 动态 和 静态 的 分 析 技 术 , 识别 客户 端 
JavaScript 中 的 漏洞 。 它 还 可 以 汇总 动态 和 静态 分 析 ,提供 增强 的 报告 功能 。 

2) 详细 的 安全 性 报告 和 企业 级 仪表 板 

AppScan 帮助 按照 业务 影响 对 应 用 资产 进行 分 类 和 优先 排序 ,确定 高 风险 区 域 。 用 
户 可 以 清晰 了 解 由 已 确定 的 漏洞 导致 的 安全 性 和 合 规 性 风险 ,并 通过 绩效 指标 显示 

3) 测试 策略 .扫描 模板 和 提供 建议 

AppScan 支持 策略 定义 和 扫描 模板 以 监管 应 用 安全 测试 。 它 可 以 提供 漏洞 建议 、 修 复 
建议 和 内 置 培训 视频 ,对 开发 团队 进行 培训 。 

4) 基于 风险 的 应 用 安全 管理 

借助 AppScan, 组 织 可 以 根据 自己 的 策略 对 风险 进行 定义 。 衡 量 应 用 上 的 风险 可 能 取 
决 于 多 个 因素 ,例如 访问 、 业 务 影响 或 安全 威胁 的 重要 性 等 。 这 些 因 素 可 以 进行 定制 并 编 入 
AppScan 的 计算 。 管 理 员 可 以 定义 风险 衡量 规则 ,然后 根据 风险 级 别 对 应 用 进行 自动 分 类 
或 排序 ,帮助 他 们 利用 更 少 资源 做 出 可 靠 决 策 。 


8.2 ZAP 安全 性 测试 起 步 
本 节 介 绍 安全 性 测试 工具 ZAP 的 安装 和 基本 操作 。 


8.2.1 ZAP 的 安装 和 启动 后 的 界面 


下 面 以 Windows 环境 为 例 讲解 安装 方法 。 在 官网 https://github. com/zaproxy/ 
zaproxy/ Wiki/Downloads 下 载 安装 程序 ZAP_2_7_0_windows-x32. exe 或 ZAP_2_7_0_ 
windows. exe. Mi; ZAP_2_7_0_windows. exe, 按 提示 安装 即 可 。 

由 于 ZAP 可 以 作为 HTTP 代理 服务 器 ,需要 使 用 8080 端口 ,请 确保 8080 端口 没有 被 
占用 。 

运行 ZAP 时 ,会 出 现 如 图 8. 1 的 提示 。 

默认 情况 下 ,ZAP 会 话 以 HSQLDB 数据 库 的 形式 用 默认 名 称 和 位 置 被 保存 到 硬盘 。 
如 果 不 需 要 保存 ,那么 在 退出 ZAP 时 ,这 些 文件 将 被 删除 。 如 果 选 择 保存 ZAP 会 话 ,那么 
下 次 启动 ZAP 后 可 以 打开 保存 的 ZAP 会 话 。ZAP 的 界面 如 图 8.2 Bros 。 

ZAP 的 界面 由 如 下 部 分 组 成 : 

菜单 栏 一 一 包含 了 自动 化 操作 或 手工 操作 的 菜单 项 。 

工具 栏 一 一 包含 了 常用 操作 的 按钮 。 

树 状 导 航 窗 口 一 一 显示 站 点 树 或 脚本 树 。 
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Welcome to the OWASP Zed Attack Proxy (ZAP) 
ZAP is an easy to use integrated penetration testing tool for finding vulnerabilities in web applications. 
Please be aware that you should only attack applications that you have been specifically been given permission to test. 


To quickly test an application, enter its URL below and press 'Айаск. 


图 8.2 ZAP 的 界面 
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工作 区 窗口 一 一 显示 请 求 、 响 应 和 脚本 ,人 允许 编辑 脚本 。 工 作 区 窗口 有 五 个 标签 ， 
Quick Start, 2 ,响应 、Script Console 和 中 断 , 默 认 会 显示 前 三 个 标签 , 单 击 十 号 可 以 增加 
未 显示 的 标签 。 

信息 窗口 一 一 显示 有 关 信 息 ,信息 窗口 有 多 个 标签 , 单 击 十 号 可 以 增加 未 显示 的 标签 。 

页 脚 区 一 一 显示 警报 数 等 信息 。 

可 以 用 拖拉 的 方式 调整 树 状 导 行 窗口 ,工作 区 窗口 和 信息 窗口 的 大 小 。 


8.2.2 ZAP 的 基本 操作 


1. 快速 渗透 测试 


在 工作 区 窗口 的 Quick Start 标签 ,输入 被 测 Web 应 用 的 网 址 和 端口 , 单 击 “攻击 ” 按 
钮 ,将 对 被 测 Web 应 用 进行 快速 渗透 测试 ,如 图 8.3 所 示 。 


文件 зй 查看 分 析 报告 ТА Online Mun 
sandardvode зз) |) BERG 30569 OOS OFF оу өрроҳшъш ос 


+ — wr [аше | |) Script console | X har 
JOGOS  —— q 
v @ Contests | Welcome to the OWASP Zed Attack Proxy (ZAP) 
[© Detautt Context 


eds ZAP is an easy to use integrated penetration testing too! for finding vulnerabilities in web applications. 
` 
> E A hftp/10.604.252:8 | | Please be aware that you should only attack applications that you have been specifically been given permission to te 


| To quickly test an application, enter its URL below and press ‘Attack. 


» ШШ http/lciscobinary.oper URL to attack: http./10 60 4 2528080 LJ 


> M peauss mma iac ERR 
» W hitps-Jactivity-strea | 
Progress: Attack complete - see the Alerts tab for details of any issues found 
> GBP nip//106042511w| | 7 
+ s|] [+ D 
Bae | we LÌ SRE |Ж Spider | ^ Eiai | + 
oc ? (X-Content-Type-Options Header Missing a 


Y S BR) 

> i Application Error Disclosure (2) 

» Fa X-Frame-Options Header Not Set (125) 

» f) Password Autocomplete in Browser (43) 

» ju Web Browser XSS Protection Not Enabled (133) 
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图 8.3 快速 渗透 测试 


ZAP 将 使 用 Spider 对 被 测 Web 应 用 进行 仆 行 操作 ,然后 对 抱 行 发 现 的 每 个 页 面 进行 
被 动 扫描 ,接着 ZAP 使 用 主动 扫描 攻击 所 有 被 发 现 的 页 面 。 

测试 完成 后 ,在 信息 窗口 的 “警报 ”标签 可 以 看 到 发 现 的 系统 漏洞 。 在 “警报 ”标签 的 左 
边 窗 口中 按 警 报 类 型 对 被 发 现 可 能 有 问题 的 页 面 进 行 了 分 类 , 单 击 可 能 有 问题 的 页 面 , 在 右 
边 窗口 中 将 显示 页 面 URL, JAUS 2t 9] High, Medium, Low, Informational, False Positive) 
和 描述 等 信息 。 在 工作 区 窗口 单 击 “ 响 应 ”标签 ,可 以 看 到 响应 头 和 响应 体 , 并 且 产 生 警 报 的 
响应 文本 会 加 亮 显示 , 如 图 8.4 所 示 。 
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图 8.4 查看 警报 信息 和 来 源 


2. 将 ZAP 设置 为 浏览 器 的 HTTP 代理 服务 器 


如 果 需 要 对 被 测 应 用 进行 深入 测试 ,那么 应 当 在 工作 区 窗口 的 Quick Start 标签 中 选择 
浏览 器 , 单 击 Launch Browser 按钮 。 这 时 ZAP 将 作为 HTTP 代理 服务 器 ,并 且 选 择 的 浏 
览 器 已 经 设置 好 了 代理 服务 器 。 然 后 单 击 “ 攻 击 ” 按 钮 。 

如 果 浏 览 器 需要 设置 HTTP 代理 服务 器 才能 访问 被 测 Web 应 用 ,那么 还 需要 在 ZAP 
中 设置 HTTP 代理 服务 器 。 具 体 方法 是 : 在 ZAP 中 选择 “工具 ”一 “选项 ”菜单 项 ,在 
Options 窗口 选择 Connection, 设 置 代理 服务 器 ,如 图 8.5 所 示 。 


图 8.5 在 ZAP 中 设置 代理 服务 器 
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8.3 ZAP 安全 性 测试 演练 


被 动 扫 描 和 自动 攻击 是 Web 应 用 脆弱 性 评估 的 良好 起 点 ,但 是 , 它 有 以 下 一 些 限制 。 

。 被动 扫描 无 法 发 现任 何 由 登录 页 面 保护 的 页 面 。 这 是 因为 ,除非 已 经 配置 了 ZAP 
的 身份 验证 功能 ,否则 ZAP 不 会 处 理 所 需 的 身份 验证 。 

* 有 些 页 面 用 ZAP 默认 Spider 是 不 能 发 现 的 ,被 动 扫描 不 能 测试 这 些 页 面 。 在 被 动 
扫描 之 外 ,ZAP 为 发 现 和 覆盖 提供 了 额外 的 选项 。 

。 被 动 扫描 时 不 能 对 探索 顺序 有 更 多 的 控制 ,自动 攻击 时 对 攻击 类 型 也 没有 更 多 的 选 
择 。 在 被 动 扫描 之 外 ,ZAP 为 探索 和 攻击 提供 了 额外 的 选项 。 


8.3.1 设置 Spider 


快速 扫描 使 用 的 是 传统 的 ZAP Spider, 这 种 Spider 通过 检查 Web 应 用 响应 的 HTML 
发 现 链接 。 传 统 Spider 的 优点 是 速度 快 ,但 是 在 探测 AJAX Web 应 用 时 并 不 总 是 有 效 的 ， 
因为 AJAX Web 应 用 使 用 JavaScript 生成 链接 。 

对 于 AJAX Web 应 用 ,可 以 选择 ZAP 的 AJAX Spider, AJAX Spider 的 速度 比 传统 的 
Spider 的 速度 慢 。 

在 信息 窗口 中 单 击 十 号 ,然后 选择 AJAX Spider, 可 以 显示 AJAX Spider 标签 页 。 在 
AJAX Spider 标签 页 , 单 击 New Scan 按钮 开始 使 用 AJAX Spider 扫描 。 


8.3.2 自动 探索 与 手工 探索 相 结 合 


Spider 是 自动 探索 网 站 的 有 力 工具 ,但 是 ,它们 应 当 与 手工 探索 相 结 合 ,才能 对 网 站 进 
行 更 有 效 的 探索 。 例 如 ,Spider 只 能 在 Web 应 用 的 表单 中 输入 基本 的 数据 ,人 工 输入 的 数 
据 相 关 性 更 高 ,因此 ,探索 会 更 有 效 。 我 们 知道 ,注册 用 户 表单 通常 要 求 输入 有 效 的 Email 
地 址 ,人 工 输入 比 Spider 会 更 有 效 地 进行 探索 。 因 为 Spider 只 能 输入 随机 的 字符 串 作 为 
Email 地 址 ,这 将 导致 错误 。 而 人 工 输入 时 可 以 根据 错误 提示 ,输入 正确 格式 的 字符 串 , 从 
而 探索 到 更 多 的 页 面 。 

我 们 可 以 设置 浏览 器 将 ZAP 作为 代理 服务 器 ,使 用 设置 了 代理 服务 器 的 浏览 器 手工 探 
索 Spider 不 能 探索 的 Web 应 用 的 页 面 。ZAP 被 动 扫描 手工 探索 产生 的 请 求 和 响应 ,构建 
站 点 树 、 记 录 潜 在 风险 的 警报 。 

重要 的 是 ,对 Web 应 用 的 所 有 页 面 进行 探索 ,遗漏 是 不 安全 的 ,即使 是 隐藏 的 页 面 也 不 
要 放 过 。 


8.3.3 主动 扫描 


被 动 扫描 不 会 改变 响应 ,被 认为 是 安全 的 。 被 动 扫 描 在 后 台 进 程 中 进行 ,不 会 影响 探索 
速度 。 被 动 扫 描 适 用 于 发 现 Web 应 用 的 脆弱 性 ,使 我 们 对 Web 应 用 的 安全 状况 有 一 个 基 
本 的 了 解 , 为 更 深入 地 研究 Web 应 用 的 安全 问题 指明 了 方向 。 

主动 扫描 使 用 已 知 的 攻击 手段 对 选择 的 目标 进行 攻击 ,试图 发 现 未 被 被 动 扫描 发 现 的 
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脆弱 性 。 由 于 主动 扫描 是 对 目标 的 真实 攻击 ,将 会 导致 被 攻击 目标 处 于 风险 状态 。 因 此 ,只 
能 对 被 授权 进行 测试 的 目标 进行 主动 扫描 。 

主动 扫描 的 步骤 如 下 : 

* 在 树 状 导航 窗口 ,选择 “站 点 ”标签 ,然后 选择 需要 进行 主动 扫描 的 站 点 。 

。 布 击 选择 的 站 点 ,选择 “攻击 ”一 “主动 扫描 "菜单 项 ,如 图 8.6 所 示 。 


27. 187316950. 


图 8.6 主动 扫描 菜单 项 


查看 和 修改 配置 ,然后 再 开始 主动 扫描 的 步骤 如 下 : 
。 在 菜单 栏 ,选择 “工具 ”一 “主动 扫描 ”菜单 项 ,出 现 如 图 8.7 所 示 的 窗口 。 


图 8.7 主动 扫描 配置 窗口 


第 8 章 


° 查看 配置 ,根据 需要 修改 配置 。 
。 单 击 * 开 始 扫描 ?按钮 ,使 用 这 些 配 置 进行 主动 扫描 。 


Ges 


任务 1: 安装 ZAP, 记 录 安 装 过 程 ,编写 安装 说 明 书 。 


任务 2: 使 用 ZAP 对 一 个 Web 应 用 进行 安全 性 测试 ,编写 测试 分 析 报告 。 
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本 章 主 要 内 容 

Spring 框架 简介 

Spring 应 用 测试 基础 

Spring MVC Web 应 用 测试 演练 


计算 机 软件 从 单机 的 计算 机 程序 、C/S 架构 的 应 用 ,到 B/S 架构 的 应 用 。 应 用 软件 越 
来 越 复杂 ,用 户 体验 要 求 越 来 越 高 。 软 件 开发 技术 不 断 发 展 以 适应 市 场 的 需求 ,从 HTML、 
Servlet JSP 到 Java EE、Struts、Hibernate、Spring。 使 用 Spring 框架 开发 Web 应 用 已 很 普遍 。 

本 章 首先 简单 介绍 Spring 框架 和 Spring 应 用 测试 基础 ,然后 通过 示例 讲解 Spring 
MVC Web 应 用 测试 方法 。 


6.1 Spring MVC Web 应 用 测试 简介 
本 节 首 先 介绍 Java Web 应 用 开发 的 框架 Spring ,然后 介绍 Spring 应 用 测试 基础 。 


9.1.1 Spring 框架 简介 


Spring 团队 提倡 使 用 TDD( 测 试 驱动 开发 ) 的 方法 开发 软件 ,Spring 框架 提供 了 对 单元 
测试 和 集成 测试 的 支持 。 正 确 地 使 用 TOC 可 以 使 得 单元 测试 和 集成 测试 更 容易 。 


1. Spring 框架 


Spring 框架 是 一 个 开发 基于 Java 平台 的 企业 应 用 的 综合 编程 和 配置 模型 ,用 Spring 
框架 开发 的 企业 应 用 可 以 部 署 到 任何 平台 。Spring 框架 的 核心 是 应 用 级 的 基础 设施 支持 : 
Spring 专注 于 企业 应 用 的 “管道 ”, 开 发 团队 不 需要 在 特定 的 部 署 环境 中 纠结 ,可 以 专注 于 
应 用 层 的 业务 逻辑 。 

Spring 框架 有 如 下 特点 : 

(1) 核心 技术 一 一 依赖 注入 .事件 资源、 国际 化 验证、 数据 绑 定 、 类 型 转换 、SpEL 
fil ЛОР. 

(2) 测试 

(3) 数据 访问 


mock 对 象 TestContext 框架 , Spring MVC Test, WebTestClient. 
transactions, DAO support, JDBC, ORM, Marshalling XML, 
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(4) Web 框架 一 一 Spring MVC 和 Spring WebFlux。 
(5) 集成 remoting, JMS,JCA,JMX.email.tasks,scheduling cache. 
(6) 语言 一 一 Kotlin、Groovy、 动 态 语言 。 


2. Spring Boot 


Spring 应 用 开发 令 人 望而却步 的 是 烦琐 的 Spring 配置 ,Spring Boot 使 得 创建 独立 的 
Spring 应 用 更 容易 。Spring Boot 具有 如 下 特点 : 

(1) 创建 独立 的 Spring 应 用 。 

(2) AT Tomcat, Jetty 或 Undertow( 不 需要 在 Web 服务 器 中 部 署 WAR 文件 ) 。 

(3) 提供 了 自 定义 “启动 ”依赖 ,简化 了 构建 配置 (Maven、Gradle)。 

(4) 尽 可 能 自动 配置 Spring 和 第 三 方 库 。 

(5) 为 产品 化 提供 了 性 能 度量 .安全 检查 和 外 部 配置 。 

(6) 没有 代码 生成 ,不 需要 XML 配置 。 


3. Spring 开发 工具 套件 STS 


STS(Spring Tool Suite) 是 一 个 专门 为 开发 Spring 应 用 定制 的 免费 的 基于 Eclipse 的 
开发 环境 。 它 集成 了 Pivotal tc Server, Pivotal Cloud Foundry,Git, Maven, Aspect] ,使 得 
实现 .调试 .运行 和 部 署 Spring 应 用 更 加 方便 。 

STS 附带 的 Pivotal tc Server 是 开发 者 版 本 ,这 是 一 个 为 Spring 优化 的 Tomcat h$ 
代 服 务 器 。 通 过 Spring Insight 控制 台 ,tc Server 提供 了 一 个 应 用 程序 性 能 度量 的 图 形 实 
时 视图 ,可 以 让 开发 者 识别 和 诊断 问题 。 

STS 支持 以 本 地 、 虚 拟 和 基于 云 的 服务 器 为 目标 的 应 用 程序 。 

STS 的 下 载 地 址 是 http://spring. io/tools/sts/。 


9.1.2 Spring 应 用 测试 基础 
1. 单元 测试 


Spring 框架 的 依赖 注入 使 得 代码 比 传统 的 Java EE 开发 更 少 依赖 于 Web 容器 。 组 成 
Spring 应 用 的 POJO 在 单元 测试 或 TestNG 测试 中 是 可 测试 的 ,这 是 因为 POJO 没有 使 用 
Spring 或 其 他 容器 ,对 象 的 实例 化 是 使 用 new 操作 符 完成 的 。 我 们 可 以 使 用 Mock 对 象 以 
隔离 的 方式 测试 代码 。 如 果 遵 循 Spring 的 架构 建议 ,那么 代码 将 有 清晰 的 分 层 和 组 件 化 ， 
这 将 有 助 于 进行 单元 测试 。 例 如 ,可 以 通过 截取 或 模拟 ОЛО 或 存储 库 接 口 来 测试 服务 层 
对 象 ,而 不 需要 在 运行 单元 测试 时 访问 持久 数据 。 

对 于 某 些 单元 测试 场景 ,Spring 框架 提供 以 下 模拟 对 象 和 测试 支持 类 。 

1) Mock 对 象 

(1) 环境 。 

包 org. springframework. mock. env 提供 了 抽象 类 Environment 和 PropertySource 的 
Mock 实现 。MockEnvironment 和 MockPropertySource 可 以 用 于 开发 不 依赖 容器 的 测试 ， 
而 被 测 代码 却 是 依赖 于 特定 环境 属性 的 。 
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(2) JNDI。 

包 org. springframework. mock. jndi 提供 了 JNDI SPI 的 实现 ,用 于 为 测试 套件 或 独立 
的 应 用 设置 简单 的 JNDI 环境 。 例 如 ,如 果 在 测试 代码 和 Java EE 容器 中 ,JDBC 数据 源 绑 
定 到 相同 的 JNDI 名 称 , 就 可 以 不 必修 改 , 在 测试 场景 中 重用 应 用 程序 代码 和 配置 。 

(3) Servlet API。 

fil org. springframework. mock. web 提供 了 一 组 综合 的 Servlet API 模拟 对 象 ,用 于 测 
iX Web 上下文. 控制 器 和 过 滤器 。 这 些 模 拟 对 象 是 针对 Spring 的 Web MVC 框架 使 用 的 ， 
并 且 通 常 比 动态 模拟 对 象 (如 EasyMock) 或 可 选 的 Servlet API 模拟 对 象 (如 MockObject) 
更 便于 使 用 。 

Spring MVC Test 框架 基于 Servlet API 模拟 对 象 ,为 Spring MVC 提供 了 一 个 集成 测 

(4) Spring Web Reactive。 

包 org. springframework. mock. http. server. reactive 提供 了 ServerHttpRequest 和 
ServerHttpResponse 的 模拟 实现 ,用 于 WebFlux 应 用 。 包 org. springframework. mock. 
web. server 提供 了 依赖 于 这 些 模 拟 请 求 和 响应 对 象 的 模拟 ServerWebExchange。 

2) 单元 测试 支持 类 

(1) 通用 测试 类 。 

包 org. springframework. test. util 包含 了 几 个 在 单元 测试 和 集成 测试 时 使 用 的 通 
用 类 。 

类 ReflectionTestUtils 提供 了 一 组 基于 反射 的 实用 方法 ,用 于 在 测试 场景 修改 常数 值 、 
设置 非 公 有 变量 .调用 非 公 有 setter 方 法 .调用 非 公 有 配置 或 生命 周期 回调 方法 。 

类 AopTestUtils 提供 了 一 组 与 AOP 相关 的 实用 方法 ,用 于 获取 被 Spring 代理 隐藏 的 
对 象 引 用 。 例 如 ,使 用 EasyMock 或 Mockito 库 时 用 Spring 代理 对 模拟 对 象 进行 了 包装 ， 
需要 直接 访问 模拟 对 象 进行 测试 时 ,就 需要 类 AopTestUtils 提供 的 方法 。 

(2) Spring MVC, 

包 org. springframework. test. web 提供 了 类 ModelAndViewAssert, 这 个 类 可 以 和 
JUnit, TestNG 或 任何 其 他 单元 测试 框架 一 起 使 用 ,用 于 处 理 Spring MVC ModelAndView 
对 象 。 

使 用 ModelAndViewAssert 和 Spring Servlet API 模拟 对 象 (例如 ,MockHttpServletRequest、 
MockHttpSession) 可 以 将 Spring MVC 控制 器 作为 POJO 进行 单元 测试 。 如 果 需 要 对 Spring 
MVC 和 REST 控制 器 与 WebApplicationContext 配置 进行 集成 测试 ,需要 使 用 Spring MVC Test 
框架 。 


2. 集成 测试 


重要 的 是 ,我们 不 必 将 应 用 部 署 到 服务 器 上 就 能 完成 一 些 集成 测试 。spring-test 库 文 
件 提供 了 对 集成 测试 的 支持 ,这 个 库 文 件 中 包含 了 包 org. springframework. test。 包 org. 
springframework. test 提供 了 一 些 类 ,用 于 进行 与 Spring 容器 的 集成 测试 。 这 种 集成 测试 
不 依赖 于 应 用 服务 器 或 部 署 环 境 , 测 试 速度 比 单元 测试 慢 。 但 是 ,与 用 Selenium 进行 集成 
测试 的 方法 (依赖 于 应 用 服务 器 或 部 署 环 境 ) 相 比 ,测试 速度 要 快 得 多 。 
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1) 集成 测试 目标 

Spring 集成 测试 支持 的 主要 目标 如 下 : 

* 在 测试 执行 时 管理 Spring ТОС 容器 缓存 。 

。 提供 test fixture 实例 的 依赖 注入 。 

。 提供 适合 于 集成 测试 的 事务 管理 。 

。 提供 Spring 特定 的 基 类 ,帮助 开发 人 员 编 写 集成 测试 。 

2) 对 JDBC 测试 的 支持 

包 org. springframework. test. jdbc 提供 了 类 JdbcTestUtils, 这 个 类 提供 了 一 组 方法 用 
于 简化 标准 的 数据 库 测试 场景 。 

3) 注解 

Spring 提供 了 大 量 的 注解 支持 Spring 应 用 的 测试 ,主要 有 如 下 几 类 : 
Spring 测试 注解 一 一 Spring 框架 提供 了 一 些 Spring 测试 特定 的 注解 ,用 于 和 
Spring TestContext 框架 一 起 进行 单元 测试 和 集成 测试 。 
Spring 标准 注解 一 一 Spring TestContext 框架 还 支持 一 些 标准 的 注解 (不 是 Spring 
测试 特定 的 注解 ) 。 
Spring JUnit 4 测试 注解 一 一 是 能 用 于 SpringRunner, Spring JUnit 规则 或 Spring 
JUnit 4 支持 类 的 注解 。 
Spring JUnit Jupiter 测试 注解 一 一 只 能 用 于 SpringExtension 和 JUnit Jupiter( 即 
JUnit5 中 的 编程 模型 ) 的 注解 。 
用 于 测试 的 元 注解 一 一 大 多 数 用 于 测试 的 注解 可 以 用 作 元 注解 。 

4) Spring TestContext 框架 

Spring TestContext 框架 ( 即 包 org. springframework. test. context) 专 为 测试 Spring 
应 用 提供 通用 的 注解 驱动 的 单元 测试 和 集成 测试 支持 。 直 接 使 用 JUnit 等 测试 框架 对 
Spring 应 用 进行 测试 存在 一 些 问题 ,Spring TestContext 框架 可 以 使 我 们 能 够 结合 JUnit, 
TestNG 等 测试 框架 更 好 地 测试 Spring 应 用 。 

5) Spring MVC Test 框架 

Spring MVC Test 框架 提供 了 统一 的 API, 用 于 测试 Spring MVC 代码 ,这 个 API 可 以 
fil JUnit, TestNG 或 任何 其 他 测试 框架 一 起 使 用 。Spring MVC Test 框架 是 基于 Servlet 
API 模拟 对 象 的 ,因此 ,不 需要 使 用 Servlet 容器 。 

6) WebTestClient 

spring-test 包含 的 WebTestClient (org. springframework. test. web. reactive. server. 
WebTestClient) 用 于 测试 WebFlux 服务 器 .Spring WebFlux 是 Spring 5 引入 的 支持 反应 
式 编程 的 Web 应 用 框架 。 


6.2 Spring MVC Web 应 用 测试 起 步 


下 面 将 创建 一 个 简单 的 Spring Web 应 用 ,用 JUnit 对 这 个 应 用 进行 单元 测试 。 对 于 应 
用 中 的 单个 Java 类 ,我 们 已 经 学 习 过 进行 单元 测试 的 方法 ( 见 第 4 章 )。 现 在 要 学 习 的 是 使 
H JUnit, Spring Test(MockMVC) 和 Spring Boot 测试 Java 代码 与 Spring 框架 的 交互 。 
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本 节 首 先 使 用 STS 3.9. 4 创建 一 个 简单 Spring 应 用 ,然后 和 运行、 测试 这 个 Spring Boot 
应 用 。 


9.2.1 创建 一 个 简单 的 Spring 应 用 
创建 一 个 简单 的 Spring 应 用 的 步骤 如 下 : 
1. 创建 一 个 Maven 项 目 


(1) 在 STS 中 选择 File>New—> Maven Project 菜单 项 ,在 新 建 Maven 项 目的 向 导 中 
选中 Create a simple project, 如 图 9.1 所 示 。 


[Z] Create a simple project (skip archetype selection) 


V] Use default Workspace location 


Location: [ 


图 9.1 创建 Maven 项 目 向 导 1 
(2) 单 击 Next 按钮 ,输入 Group Id, Artifact Id, 如 图 9. 2 所 示 。 


Artifact Id: | gs-testing-web 
Version: — 00.1-SNAPSHOT 
Parent Project 


Group Id: 
Artifact Id: 


图 9.2 创建 Maven 项 目 向 导 2 


9S Spring MVC Web 应 用 测试 


(3) 单 击 Finish 按钮 ,在 包 浏览 器 中 展开 项 目 gs-testing-web, 单 击 pom. xml 项 ,如 图 9. 3 
所 示 。 


File Edit Source — Search Project Run Window Нер 
220i6-iBivief]O;*-0-S-»-^-iGwco-i5o5-oi9 
H> 2 O Quick Access. je 园 
= п B gs-testing-web/pom.xml 25 | coe Pu 
1*5«project xmlns-"http://maven.apache.org/POM/4.0.0" хт1пѕ + 
< BB gsctesting web 2  «modelVersion»4.0.0«/modelVersion» 
@® src/main/java. 3  «groupId»com.hzcollege«/groupId» 
po 4 <artifactId>gs-testing-web</artifactId> 
Lives 5 — <version>@.0.1-SNAPSHOT</version> 


08 sre/test/resources » 
> Bh JRE System Library (/25Е- В 6 </projects| 


> Ф sre 


@ target 
D pomaml 
> © Servers - 


> E$ spring-petclinic [boot] [devte g 
Overview Dependencies | Dependency Hierarchy Effective POM pom.xml 


—— a) * | E Console sj Progress 国 Problems £2 ele теп 
M Serv 员 @ Soot. = O errors, 12 warnings, 0 others 


E OU mp >v |Description 
@& Server - Pivotal tc Server Dey ^ Ê Warnings (12 items) 


图 9.3 Maven 项 目 创建 完成 
(A) 修改 pom. xml 文件 ,如 下 : 


<?xml version = "1.0" encoding = "ОТЕ - 8"?> 
< project xmlns = "Һер: //maven. apache. огд/РОМ/4. 0. 0" xmlns: xsi = "http://www. w3. org/2001/ 
XMLSchema – instance" 

xsi: schemaLocation = "http://maven. apache. org/POM/4. 0. 0 http: //naven. apache. org/xsd/ 
maven — 4. 0. 0. xsd"» 

<modelVersion > 4. 0. 0 </modelVersion> 


< groupId> org. springframework </groupId> 
<artifactId> gs- testing- web</artifactId> 
< version» 0.1.0 «/version» 


< parent > 
< groupId > org. springframework. boot </groupId> 
<artifactId> spring- boot - starter ~ parent </artifactId> 
< version» 2. 0.3. RELEASE </version> 
</parent > 


< dependencies > 
< dependency > 
< groupId> org. springframework. boot </groupId > 
<artifactId> spring - boot — starter — web </artifactId> 


ЭИ atis 
N 


</dependency> 
< dependency > 
< groupId> org. springframework. boot </groupId> 
<artifactId> spring - boot - starter ~ test </artifactId> 
< scope > test </scope> 
</dependency> 
</dependencies > 


< properties > 
< java. version» 1.8 </ јама. version» 
</properties > 


<build> 
«plugins» 
« plugin» 
< groupId> org. springframework. boot </groupId > 
<artifactId> spring- boot — maven - plugin</artifactId> 
</plugin> 
</plugins > 
</build> 


</project > 


(5) 在 包 浏 览 窗口 中 , 右 击 src/main/java, 在 弹出 的 快捷 菜单 中 ,选择 New Folder Ж 
单项 ,在 出 现 的 New Folder 窗口 输入 Folder name, 如 图 9. 4 所 示 。 


Folder 


Create a new folder resource. 


Enter or select the parent folder: 
gs-testing-web/src/main/java 
t ° ° 
4 Ù gs-testing-web [boot] 
© settings 
4@src 
4 @ main 
© java 
@ resources 
> G test 


Folder name: hello| 


Advanced zz) 


9.4 ”新 建文 件 夹 
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(6) 单 击 Finish 按钮 ,创建 了 一 个 简单 的 Java Maven 项 目 ,如 图 9. 5 所 示 。 


Esci — 


" encoding-"UTF-8"?» 

48 getesting web boot] 29 «project xmlns-"http://maven. apache. org/POM/4.0.0" xmln: 

< ® талана xsi:schemalocation-"http: //maven. apache. org/POM/4. 0. 
«modelVersion»4.0.0«/modelVersion» 


«groupId»org. springframework«/groupId» 
еган ДЕ <artifactId>gs-testing-web</artifactId> 
MAN Desc in <version>@.1.0</version> 
a <parent> 
国 pomam! «grouptd»org. springframework.boot«/groupId» 
上 B Servers «artifactId»spring-boot-starter-parent«/artifact 
| а= <version>2.0.3.RELEASE</version> 


W Serv... H Ө Boot. </parent> 


B*o5num- 
à Server - Pivotal tc Server Dev 


«dependencies» 


图 9.5 新 建文 件 夹 完成 


2. 创建 Spring 控制 器 


CD 在 包 浏 览 窗口 中 , 右 击 src/main/java 包 下 的 hello。 在 弹出 的 快捷 菜单 中 ,选择 
New-*Class 菜单 项 。 在 新 建 类 导航 中 输入 类 名 HomeController, 如 图 9. 6 所 示 。 


Source folder gs-testing-web/src/main/java 


Package: 
E) Endosing type: 


Which method stubs would you like to create? 
© public static void mainfString0 args) 
E Constructors from superclass 
Inherited abstract methods 

Do you want to add comments? (Configure templates and default value here) 
E Generate comments 


9.6 新 建 类 
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(2) 单 击 Finish 按钮 ,将 在 编辑 器 中 显示 HomeController. java, 如 图 9. 7 所 示 。 


"eco ia - Spring Tool Suit 
Navigate Search Project Run Window Help 
CATRE CEH Fao CHIT TERT N RT TTEA] 
Bir Fr о-о Quick access i| 6 |) 


li Package Explorer $3. = Г |B gs-testing-web/pomam! [m HomeController java 21 oi о. 
&&|v v Ë 1 package hello; 
4 Ë gs-testing-web [boot] 2 
4 @ sr/meinjava public class HomeController { 


} 


i 
A 
= 
= 
di 


> BÀ JRE System Library [2 
> mh Maven Dependencies 
> @ sre 
Ф target 
I pom.xml - 
"A d 
W Serv. Ho @ Boot. = D 
BHON P ~ 
@ Server - Pivotal te Server Der 


图 9.7 新 建 类 完成 
(3) 修改 HomeController. java 文件 如 下 : 
package he1lo; 


import org. springframework. stereotype. Controller; 
import org. springframework. web. bind. annotation. RequestMapping; 
import org. springframework. web. bind. annotation. ResponseBody; 


@controller 
public class HomeController { 


@RequestMapping("/") 
public @ResponseBody String greeting() { 
return "Hello World"; 
} 
} 
上 面 的 示例 代码 没有 指定 GET PUT POST 等 .这 是 因为 使 用 了 注解 ,@RequestMapping 
默认 映射 所 有 HTTP 请 求 ,而 (€ RequestMapping( method — GET) 指定 映射 到 GET 方 法 。 


3. 使 应 用 是 可 以 运行 的 


传统 的 方法 是 将 Web 应 用 打包 成 WAR 文件 ,然后 部 署 到 Web 服务 器 。 一 个 简单 的 
方法 是 创建 一 个 独立 应 用 ,利用 Spring Boot 编写 一 个 main() 方 法 ,将 Web 应 用 和 内 置 的 
Tomcat 打包 成 可 以 执行 的 jar 文件 。 首 先 编写 一 个 Application Ж. 

src/main/java/hello/ Application. java 文件 如 下 : 
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package hello; 


import org. springframework. boot. SpringApplication; 
import org. springframework. boot. autoconf igure. SpringBootApplication; 


@SpringBootApplication 
public class Application { 


public static void main(String[] args) { 
SpringApplication. run(Application. class, args); 
} 

} 

在 上 面 的 示例 代码 中 ,使 用 了 注解 @SpringBootApplication, @ SpringBootApplication 
注解 可 以 替代 @Configuration.@ EnableAutoConfiguration,@ComponentScan 注解 ,简化 
Spring 的 配置 。 

。 @Configuration: 将 类 标注 为 Bean。 
@EnableAutoConfiguration: 告诉 Spring Boot 按照 类 路 径 、 其 他 Bean 和 各 种 属性 
设置 自动 增加 Bean。 
@ComponentScan: 告诉 Spring 在 hello 包 内 查找 其 他 组 件 、 配 置 、 服 务 , 使 得 
Spring 可 以 找到 HelloController。 

此 外 ,对 于 Spring MVC 应 用 ,通常 会 增加 注解 @EnableWebMvc, 这 个 注解 将 Spring 
应 用 标注 为 Web 应 用 。 但 是 , 当 Spring Boot 感知 到 类 路 径 中 有 spring-webmvc 时 , 它 会 
动 增加 @EnableWebMvc 注解 。 

Main() 方 法 使 用 了 Spring Boot 的 SpringApplication. run() 方 法 启动 应 用 。 我 们 注意 
到 ,上 面 的 示例 代码 没有 一 行 XML, 也 没有 web. xml。 这 个 Web 应 用 是 100% 纯 Java 的 ， 
没有 必要 处 理 传统 Spring 应 用 开发 时 的 烦琐 配置 。 


9.2.2 运行 Spring 应 用 


在 包 浏 览 窗口 中 , 右 击 pom. xml。 在 弹出 的 快捷 菜单 中 ,选择 Run As 一 1 Maven Build 
菜单 项 。 在 运行 设置 窗口 中 的 Goals 文本 框 内 输入 spring-boot:run, 如 图 9. 8 所 示 。 

单 击 Run 按钮 ,等 待 Maven 构建 完成 ,如 图 9. 9 所 示 。 

在 浏览 器 地 址 栏 输 入 http://localhost:8080, 将 显示 Hello World, 如 图 9. 10 所 示 。 


9.2.3 测试 Spring 应 用 


下 面 从 一 个 简单 的 测试 开始 ,检查 一 下 应 用 上 下 文 是 否 启动 。 首 先 在 pom. xml 文件 中 
增加 测试 范围 的 Spring Test 依赖 。 


< dependency > 
< groupId > org. springframework. boot </groupId> 
<artifactId> spring- boot - starter - test </artifactId> 
< scope > test </scope> 

</dependency> 
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Ый configuration and launch. @ | 


Name: gs-testing-web 

[El мат“. ай JRE) f Refresh] li Source И8 Environment [=] Common) 

Base directory: = 
Siproject locgs-testing-web} 


Goals: spring-boot:run| 
Profiles: 
User settings: E:\apache-maven-3.5.2\conf\settings.xml 


[Workspace] [Fie Sytem] Verebies-. 
El Offline E Update Snapshots 
E Debug Output 回 Skip Tests [F] Non-recursive 
El Resolve Workspace artifacts 
[=] Threads 
Parameter Name Маше [ Aqa. | 
Тым Ш> 


图 9.8 编辑 运行 配置 


We ык пок бекш Миңин awh nosa Ra Мете Yap 
IO? ^v ee mit-O-Q- -^ OSA 


Quick Access. 


ld Package Explorer 7 Г1 Ы gs-tesing-web/pomxml 国 HomeController јама Applicationjave 21. 
Е 2 
Ж pea 3¢import org.springframework.boot.SpringApplication;|| 
> @® src/main/java 5 
@® src/main/resources 6 @SpringBootApplication 
(9 srcAest/java 7 public class Application 
@® srcftest/resources 8 
» BA JRE System Library zc| “= rm лал aani CE 


gates [Maven Build] D:\Program Files\ava\jdk1.8.0_121\bin\javaw.exe (2018 年 6 月 24 日 下 午 9:09;44) 
dgnenuierridpping ，Fiappeu (L/errOr]) опсо PUUIIC OrE-SDrirngi , 


> Ë spring-petclinic [boot] [deve igHand1erMapping : Mapped "([/error],produces=[text/htm1])" on 

| -Hand1erMapping Mapped URL path [/webjars/**] onto handler 

= HandlerMapping : Mapped URL path [/**] onto handler of type 

_ iExporter : Registering beans for JMX exposure on start 

E $ 05 * 9 > 'oncatWebserver Tomcat started on port(s): 8080 (http) with 
De : Started Application in 3.551 seconds (JW ra 


M Serv... $3 @ Boot. 


D 


9.9 执行 Maven 运行 任务 完成 
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C Q localhost:8080 


Hello World 


9.10 访问 Web 应 用 


其 次 ,用 @RunWith 和 @SpringBootTest 注解 和 一 个 空 测试 方法 创建 一 个 测试 用 例 。 
src/test/java/hello/ ApplicationTest. java 文件 如 下 : 


package hello; 


import org. junit. Test; 

import org. junit. runner. RunWith; 

import org. springframework. boot. test. context. SpringBootTest; 
import org. springframework. test. context. junit4. SpringRunner; 


@RunWith(SpringRunner. class) 
@SpringBootTest 
public class ApplicationTest { 


@Test 
public void contextLoads() throws Exception { 
) 

} 


在 上 面 的 示例 代码 中 ,注解 @SpringBootTest 告诉 Spring Boot 查找 主 配置 类 (例如 ,使 
用 @SpringBootApplication 注解 的 类 就 是 主 配 置 类 ), 使 用 主 配 置 类 启动 Spring 应 用 上 
И чу 

可 以 在 IDE 或 用 命令 行 mvn test 执行 这 个 测试 用 例 ,这 个 测试 用 例 将 测试 通过 。 

增加 断言 ,判断 应 用 上 下 文 创建 了 控制 器 。 

src/test/java/hello/SmokeTest. java 文件 如 下 : 


package hello; 
import static org. assert}. соге. api. Assertions. assertThat; 


import org. junit. Test; 

import org. junit. runner. RunWith; 

import org. springframework. beans. factory. annotation. Autowired; 
import org. springframework. boot. test. context. SpringBootTest; 
import org. springframework. test. context. junit4. SpringRunner; 


@RunWith(SpringRunner. class) 
@SpringBootTest 
public class SmokeTest { 
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@Aautowired 
private HomeController controller; 


@Test 
public void contexLoads() throws Exception { 
assertThat(controller). isNotNull(); 


} 


在 上 面 的 示例 代码 中 ,注解 @Autowired 被 Spring 框架 识别 ,Spring 框架 在 测试 方法 
运行 前 注入 控制 器 。 我 们 使 用 了 AssertJ(assertThat() 等 ) 表 示 测 试 断言 。 

编写 测试 用 例 , 判 断 应 用 的 行为 。 为 此 ,启动 应 用 , 侦 听 连接 ,发 送 HTTP 请 求 , 判 断 
响应 。 

src/test/java/hello/HttpRequestTest. java 文件 如 下 : 


package hello; 


import org. junit. Test; 
import org. junit. runner. RunWith; 


import org. springframework. beans. factory. annotation. Autowired; 

import org. springframework. boot. test. context. SpringBootTest; 

import org. springframework. boot. test. context. SpringBootTest. WebEnvironment ; 
import org. springframework. boot. test. web. client. TestRestTemplate; 

import org. springframework. boot. web. server. LocalServerPort; 

import org. springframework. test. context. junit4. SpringRunner; 


import static org. assertj. core. api. Assertions. assertThat; 


@RunWith(SpringRunner. class) 
@SpringBootTest(webEnvironment = WebEnvironment. RANDOM PORT) 
public class HttpRequestTest ( 


()LocalServerPort 
private int port; 


@Aautowired 
private TestRestTemplate restTemplate; 


@Test 
public void greetingShouldReturnDefaultMessage() throws Exception { 
assertThat(this. restTemplate.getForObject("http://localhost:" + port + "/", 
String.class)).contains("Hello World"); 


Tr fau BA , 右 击 pom. xml。 在 弹出 的 快捷 菜单 中 ,选择 Run As>6 Maven Test 
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菜单 项 。 构 建成 功 后 如 图 9. 11 所 示 。 


,E-S-iG#G-ieov-e@ 
Quick Access | 18100 


Ë gs-testing-— Application...) SmokeTestjava Т HttpRequestf.. 33 ", = D 
5 


4 B3 gs-testing-web [boot] 


org.springframework.beans.factory.annotation -Auto 司 
4 (P. src/main/java 


org.springframework.boot.test.context.SpringBootT 


> B) Application java) 
> B) HemeControl 
08 src/main/resources 
4 © src/test/java. - ч 
4 8 hello © Console š: j Progress |$] Problems Sii 
? | ApplicationTest, Фах &a [EIE Е - ra - | B @ 
> 国 HtpRequestTes terminated» D:\Program е јана dkL80 121 binjavewese Goes 下 午 9:31:19) 


> B) SmokeTestjme 2015-00-24 Z1:21:43.429 INFU //1Z -- Tür'edu-5] CONT: 
@® srcjtest/resources _ [INFO] 

+ ш » [INFO] Results: 

[INFO] 

[INFO] Tests run: 3, Failures: 0, Errors: 0, Skipped: 9 


org.springframework.boot.test.web.client.TestRest 


6 
7 
^ 8 hello 8i org.springframework.boot.test.context.SpringBootT 
9 
9 org.springframework.boot .web.server.LocalServerPo 4 
] 


Mi Serv. M @ soot. 7 O 
B*toromms- 
@ Server - Pivotal te Server Dev 


图 9.11 第 1 次 执行 Maven 测试 任务 完成 


上 面 的 示例 代码 中 使 用 了 webEnvironment=RANDOM_PORT 以 随机 端口 启动 Web 
服务 器 ,用 @LocalServerPort 注入 端口 。 

另 一 个 方法 是 不 必 启 动 Web 服务 器 ,只 测试 Web WHE., Spring 框架 处 理 接收 到 的 
HTTP 请 求 , 并 传递 给 控制 器 。 这 就 需要 使 用 Spring 框架 的 MockMve 了 。 我 们 可 以 使 用 
注解 @AutoConfigureMockMvec 标注 这 样 的 测试 用 例 。 

src/test/java/hello/ApplicationTest. java 文件 如 下 : 


package hello; 


import static org. hamcrest. Matchers. containsString; 

import static org. springframework. test. web. servlet. request. MockMvcRequestBuilders. get; 
import static org. springframework. test. web. servlet. result. MockMvcResultHandlers. print; 
import static org. springframework. test. web. servlet. result. MockMvcResultMatchers. content; 
import static org. springframework. test. web. servlet. result. MockMvcResultMatchers. status; 


import org. junit. Test; 

import org. junit. runner. RunWith; 

import org. springframework. beans. factory. annotation. Autowired; 

import org. springframework. boot. test. autoconf igure. web. servlet. AutoConf igureMockMvc; 
import org. springframework. boot. test. context. SpringBootTest; 

import org. springframework. test. context. junit4. SpringRunner; 

import org. springframework. test. web. servlet. MockMvc; 
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@RunWith(SpringRunner. class) 
@SpringBootTest 

@AautoConf igureMockMvc 

public class ApplicationTest { 


(8) &utowired 
private MockMvc mockMvc; 


@Test 
public void shouldReturnDefaultMessage() throws Exception { 
this. mockMvc. perforn(get(" /") ). andDo(print()). andExpect(status(). isOk()) 
. andExpect(content(). string(containsString("Hello World"))); 


à 


在 这 个 测试 用 例 中 ,我 们 启动 了 Spring 应 用 上 下 文 ,但 是 没有 启动 Web 服务 器 。 还 可 
以 通过 使 用 @WebMvcTest 注解 ,把 测试 范围 缩小 到 Web 应 用 层 , WebLayerTest. java 的 
主要 代码 如 下 (用 户 应 该 能 够 补 全 import 语句 )。 

src/test/java/hello/WebLayerTest. java 文件 如 下 : 

@RunWith(SpringRunner. class) 


@WebMvcTest 
public class WebLayerTest { 


(à hutowired 
private MockMvc mockMvc; 


@Test 
public void shouldReturnDefaultMessage() throws Exception { 
this. mockMvc. perforn(get("/") )  andDo(print()). andExpect(status(). isOk()) 
.andExpect(content(). string(containsString("Hello World"))); 


) 


这 个 测试 用 例 的 断言 与 前 一 个 测试 用 例 一 样 ,所 不 同 的 是 ,在 这 个 测试 用 例 中 ,Spring 
Boot 仅 实例 化 了 Web 应 用 层 , 而 不 是 整个 Spring 应 用 上 下 文 。 在 有 多 个 控制 器 的 应 用 中 ， 
我 们 甚至 可 以 仅 实 例 化 单个 控制 器 ,例如 ,使 用 注解 @ WebMvcTest(HomeController. 
class) 。 

在 包 浏览 窗口 中 , 右 击 pom. xml。 在 弹出 的 快捷 菜单 中 ,选择 Run As>6 Maven Test 
菜单 项 。 构 建成 功 后 如 图 9.12 所 示 。 

到 目前 为 止 ,我 们 的 HomeController 是 非常 简单 的 ,没有 依赖 关系 。 为 了 更 接近 真实 的 
场景 ,我 们 在 一 个 新 的 控制 器 中 引入 一 个 组 件 保存 greeting。 使 用 两 个 类 : GreetingController 
和 GreetingService,GreetingController 类 依赖 于 GreetingService 类 。 

src/main/java/hello/GreetingController. java 文件 如 下 : 


I3 Package Explorer 22 | © Г] [J) ApplicationTestjava WebLayerTestjava £2 
еее "| 3eimpo junit.Test; 
$ gs-testing-web [boot] B " Ke org.juni Tests PHN 
@ src/mainjave ^ = 
4 8 hello ji ha 
^ [2 Applicationjava 


import org. springframework -boot.test.autoconfigure.web. s 


> [Й HomeControllerjava import org.springframework.test.web.servlet.MockMvc; 


@ src/main/resources е 
四 згсЛез јака —.) 
4 iB hello © Console 11 sg Progress Problems Ju JUnit 


> [D ApplicationTestjava + m XX Roe 


5 
> [Й HttpRequestTestjava «terminated» D:\Program Files\Java\jdk1.8.0_121\bin\javaw.exe (2018 年 6 月 24 日 下 午 10:02:26) 


> [Йй SmokeTestjava [INFO] 
> D WeblayerTestjava | [INFO] Results: 
| ' . [INFO] 


жеу S @ soc. = О [INFO] Tests run: 4, Failures: 0, Errors: 0, Skipped: 9 


а®Оё итш ~ 
à Server - Pivotal te Server Dev 
[INFO] BUILD SUCCESS 


rae 
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package hello; 


import org. springframework. stereotype. Controller; 
import org. springframework. web. bind. annotation. RequestMapping; 
import org. springframework. web. bind. annotation. ResponseBody; 


@Controller 
public class GreetingController { 
private final GreetingService service; 
public GreetingController(GreetingService service) { 
this. service = service; 
} 
@RequestMapping("/greet.ing” ) 
public @ResponseBody String greeting() { 
return service. greet(); 


} 

src/main/java/hello/GreetingService. java 文件 如 下 : 
package he1lo; 

import org. springframework. stereotype. Service; 


@Service 
public class GreetingService ( 
public String greet() { 
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return "Hello World"; 


} 


Spring 自动 注入 GreetingController 对 GreetingService 的 依赖 (GreetingController 的 构造 
器 签名 告诉 了 Spring 这 个 依赖 关系 )。 为 了 用 @WebMvcTest 测试 控制 器 GreetingController， 
需要 使 用 下 面 的 代码 。 

src/test/java/hello/WebMockTest. java 文件 如 下 : 


package hello; 


import static org. hamcrest.Matchers. containsString; 

import static org. mockito. Mockito. when; 

import static org. springframework. test. web. servlet. request. MockMvcRequestBuilders. get; 
import static org. springframework. test. web. servlet. result. MockMvcResultHandlers. print; 
import static org. springframework. test. web. servlet. result. MockMvcResultMatchers. content; 
import static org. springframework. test. web. servlet. result. MockMvcResultMatchers. status; 


import org. junit. Test; 

import org. junit. runner. RunWith; 

import org. springframework. beans. factory. annotation. Autowired; 

import org. springframework. boot. test. autoconf igure. web. servlet. WebMvcTest; 
import org. springframework. boot. test. mock. mockito. MockBean; 

import org. springframework. test. context. junit4. SpringRunner; 

import org. springframework. test. web. servlet. MockMvc; 


@RunWith(SpringRunner. class) 
@WebMvcTest (Greet ingController. class) 
public class WebMockTest { 


(à hutowired 
private MockMvc mockMvc; 


@MockBean 
private GreetingService service; 


@Test 
public void greetingShouldReturnMessageFromService() throws Exception { 
when( service. greet()). thenReturn("Hello Mock"); 
this. mockMvc. perforn(get(" /greeting")). andDo(print()).andExpect(status(). isOk()) 
. andExpect (content(). string(containsString("Hello Mock"))); 


) 


FA@ MockBean 创建 和 注入 了 GreetingService 的 模拟 (否则 ,应 用 上 下 文 就 不 能 启动 ) , 
使 用 Mockito 设置 断言 。 

在 包 浏 览 窗 口中 , 右 击 pom. xml。 在 弹出 的 快捷 菜单 中 ,选择 Run As 一 6 Maven Test 
菜单 项 。 构 建成 功 后 如 图 9.13 所 示 。 
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Window Help- 


$ БА-БА 
И Package Explorer 2 © D 
esli? 7 
| 2 03 gs-testing-web [boo] [= 
^ @ src/main/java 
(8 src/main/resources 
4 @® src/test/java 
4 d helo 
> B) ApplicationTest| 
b B) HttpRequestr. 
» B) SmokeTestjava 
> B) WebMockTest 
| 8 WebLayerTestje 
E srcftest/resources 
> BÀ JRE System Library Ue „ 
+a ° 
Wise. @ Boot. = D 
BOO mp 
% Server - Pivotal te Server Dey 


d — ——| , 


Ыы @:Ф”:®:®:ө{ Ф@:Ф 4 > = 


GLEE ILT = (БЕ г Ə - rs MEL: 
«terminated» D:\Program Files\Java\jdk1.8.0_121\bin\javaw.exe (2018 年 6 月 24 日 下 午 10:50:41) 
[INFO] Results: a 
[INFO] 
[INFO] Tests run: 5, Failures: 0, Errors: 0, Skipped: @ 
[INFO] 
I n —Ó————————Á 
[INFO] BUILD SUCCESS m 
[INFO] ------------------------------------------------------ - 
< , 


*:*-0-Q-»-^- 65896-9659 
Quick Access ;| 89 | PE 
=o Ta 


国 WebLayerTestjava £2 E 
1 package hello; E Em 
2 T 
3eámport static org.hamcrest.Matchers.containsString; | 

4 import static org.springframework.test.web.servlet.reque 

5 import static org.springframework.test.web.servlet.resul 

6 import static org.springframework.test.web.servlet.resul 


7 ос static_ocesncinefrasesnck. jest.weh servlet.resul" 


E) Console 21 | mg Progress [f Problems Јо JUnit CDI 


图 9.13 第 3 次 执行 Maven 测试 任务 完成 


6.3 Spring MVC Web 应 用 测试 演练 


初学 者 在 学 习 编程 和 自动 化 测试 时 往往 会 感到 很 难 , 一 个 好 的 学 习 方法 是 多 读 读 示例 
项 目的 源 代 码 LE PHI RA OBERE FEE ,不 会 作 诗 也 会 吟 ”。 


Spring 官方 提供 了 一 


个 Spring 应 用 示例 项 目 Spring PetClinic Sample Application 


(SPSA,https://github. com/spring-projects/spring-petclinic) ,SPSA 项 目的 主 分 支 是 基于 


Spring Boot 和 Thymeleaf 
示例 ,如 表 9.1 所 示 。 


分 支 项 目 名 称 


的 。SPSA 还 有 几 个 分 支 使 用 了 不 同 的 技术 实现 的 SPSA 应 用 


表 9.1 示例 项 目 SPSA 的 分 支 
所 用 技术 


spring-framework-petclinic 


基于 XML 配置 的 Spring 框架 .JSP 数据 持久 层 技术 (JDBC、JPA 和 
Spring Data JPA) 


javaconfig branch 


与 spring-framework-petclinic 基本 相同 ,不 同 的 是 用 Java 配置 代替 
了 XML 配置 


spring-petclinic-angularjs 


AngularJS 1. x.Spring Boot 和 Spring Data JPA 


spring-petclinic-angular 


Petclinic REST API (spring-petclinic-rest) #9 Angular 4 前 端 


spring-petclinic-microservices 


用 Spring Cloud 构建 的 Spring Petclinic 的 分 布 式 版 本 


spring-petclinic-reactjs 


ReactJS (TypeScript) 和 Spring Boot 


spring-petclinic-graphql 


基于 React Appolo, TypeScript 和 GraphQL Spring boot starter 的 
GraphQL 版 本 


spring-petclinic-kotlin 


spring-petclinic 的 Kotlin 版 本 


spring-petclinic-rest 


后 端 REST API 


3 
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9.3.1 在 STS 中 导入 示例 项 目 源 代 码 


首先 用 Git 命令 检 出 项 目 源 代码 ; 
git clone https://github. com/spring- projects/spring- petclinic. git 


然后 在 STS 中 选择 File Import 菜单 项 ,在 导入 向 导 中 ,展开 Maven, 选择 Existing 
Maven Projects, 如 图 9. 14 所 示 。 


Select 


Import Existing Maven Projects 


Select an import wizard: 
type filter text 


> © Install 
> © Java EE 
4 @ Maven 
Él. Check out Maven Projects from SCM 
G, Install or deploy an artifact to a Maven repository 


‘Tl Materialize Maven Projects from SCM 
> @ Oomph 
> @ Plug-in Development 
> @ Remote Systems 
> @ Run/Debug 
> @ Tasks 


Р 9.14 导入 Maven 项 目 向 导 1 


单 击 Next 按钮 ,再 单 击 Browser 按钮 ,找到 用 Git 命令 检 出 的 文件 夹 spring-petclinic， 
如 图 9.15 所 示 。 


单 击 Finish 按钮 ,在 包 浏 览 窗口 中 展开 spring-petclinic, 单 击 pom. xml. 如 图 9. 16 
所 示 。 


右 击 pom. xml, 再 选择 Run As—2 Maven Build 菜单 项 进行 构建 ,构建 成 功 后 ,在 文件 
Ж spring-petclinic-master\target 中 生成 文件 spring-petclinic-2. 0.0. BUILD-SNAPSHOT. 
jar。 在 Windows 命令 行 输入 如 下 命令 启动 示例 应 用 。 


java - jar spring 一 petclinic 一 2.0.0.BUILD — SNAPSHOT. jar 


在 浏览 器 地 址 栏 输入 http: //localhost:8080 访问 示例 应 用 。 
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Maven Projects 
Select Maven projects 


Root Directory: D:\TestLab\spring-petclinic 
Projects: 
/pomxml org.springframework-samples:spring-petclinic:2.0.0.BUILD 


(— oe 
[Add project(s) to working set 
[spring-petclinic 


区 EEC 


= D | R spsng-petciok/pomam tt | - E 
LESE 2 Я m : imeworkcsamples:s (Click for details) 4 = 


< Ба spring-petcinic ppring peti 


7| 
= a 


© Console 1 =G Progress 
Wi Servers £2 @ Boot Das.. = D) | Мо consoles to display at this time. 


BsOe mp = 
à Server - Pivotal te Server Developer 


图 9.16 导入 Maven 项 目 完成 


9.3.2 代码 分 析 


SPSA 示例 项 目 演示 了 在 JUnit 4 环境 下 Spring TestContext 框架 的 功能 。 大 部 分 测 
试 功能 都 包含 在 类 AbstractClinicServiceTests 中 。 下 面 以 项 目 spring-framework-petclinic 
为 例 ,对 代码 做 一 些 分 析 。 在 STS 包 浏 览 窗口 中 ,展开 项 目 spring-framework-petclinic, 如 
图 9. 17 所 示 。 

类 ValidatorTests 是 一 个 普通 的 JUnit 测试 类 ,与 传统 的 JUnit 单元 测试 类 不 同 的 是 ， 
它 使 用 了 一 个 新 的 断言 库 assertj( 传 统 的 JUnit 使 用 的 是 Hamcrest 断言 库 ) 。 
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4 {3 spring-framework-petclinic 
4 g srcfmain/java 
> # org.springframework.samples.petclinic 
> BB org.springframework.samples.petclinic.model 
> 出 org.springframework.samples.petclinic.repository 
> ËB org.springframework.samples.petclinic.repositoryjdbc 
> 出 org.springframework.samples.petclinic.repositoryjpa 
> ff org.springframework.samples.petclinic.repository.springdetajpa 
> # org.springframework.samples.petclinic.service 


> fB org.springframework.samples.petclinic.util 
> #8 org.springframework.samples.petdinicweb 
b @ src/main/resources 
а £ src/test/java 
4 i org.springframework.samples.petclinicmodel 
> [Й ValidatorTests java 
4 B org.springframework.samples.petclinic.service 
> D} AbstractClinicServiceTests java 
> |@ ClinicServiceJdbeTests java) 
> @ ClinicServiceJpaTests java 
> [Й ClinicServiceSpringDataJpaTests.java 
4 J org.springframework.samples.petclinicweb 
> P) CrashControllerTests.java 
b D OwnerControllerTests java 
> [) PetControllerTests java 
b [J] PetTypeFormatterTestsjava 
» [9 VetControllerTestsjava 
> D) VisitControllerTests java 


9.17 示例 项 目 spring-framework-petclinic 的 结构 


类 AbstractClinicServiceTests 是 一 个 抽象 类 , 它 是 ClinicService 集成 测试 的 基 类 。 

AbstractclinicServiceTests 及 其 子 类 使 用 了 Spring TestContext 框架 的 如 下 服务 : 

* Spring ТоС 容器 缓存 ,可 以 节省 测试 执行 之 间 的 不 必要 的 设置 时 间 。 

* test fixture 实例 依赖 注入 ,意味 着 不 需要 执行 应 用 程序 上 下 文 查找 。 例 如 ,在 类 
AbstractclinicServiceTests 中 ,用 注解 @Autowired 标注 实例 变量 clinicService。 

。 事 务 管理 ,意味 着 每 个 测试 方法 都 是 在 自己 的 事务 中 执行 的 ,默认 情况 下 会 自动 回 
深 。 因 此 ,即使 测试 插入 或 以 其 他 方式 更 改 数据 库 状态 ,也 不 需要 在 teardown 方法 
中 编写 清理 代码 。 

。 应 用 上 下 文 ApplicationContext, 用 于 显 式 bean 查找 。 

类 AbstractClinicServiceTests 的 主要 代码 如 下 :; 


package org. springframework. samples. petclinic. service; 
//import --- 


public abstract class AbstractClinicServiceTests { 


@Autowired 
protected ClinicService clinicService; 


@Test 

public void shouldFindOwnersByLastName() { 
Collection < Owner > owners = this.clinicService. findOwnerByLastName("Davis") ; 
assertThat(owners. size()). isEqualTo(2); 
owners = this.clinicService. findOwnerByLastName("Daviss") ; 
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assertThat(owners. isEmpty()). isTrue() ; 
} 


@Test 

public void shouldFindSingleOwnerWithPet() { 
Owner owner = this. clinicService. findOwnerById(1); 
assertThat (owner. getLastName( ) ). startsWith("Franklin") ; 
assertThat (owner. getPets().size()). isEqualTo(1); 
assertThat (owner. getPets().get(0).getType()). isNotNull(); 


assertThat (owner. getPets().get(0).getType() . getName( ) ). isEqualTo("cat") ; 


} 


@ Test 
(@Transactional 
public void shouldInsertOwner() ( 


Collection < Owner» owners = this.clinicService. findOwnerByLastName("Schultz"); 


int found = owners.size(); 


Owner owner = new Owner(); 

owner. setFirstName("Sam") ; 

owner. setLastName("Schultz") ; 

owner. setAddress("4, Evans Street") ; 

owner. setCity( "Wollongong" ) ; 

owner. setTelephone("4444444444") ; 

this. clinicService. saveOwner(owner) ; 

assertThat (owner. getId(). longValue( ) ) . isNotEqualTo(0) ; 


owners = this.clinicService. findOwnerByLastName("Schultz") ; 
assertThat(owners. size()). isEqualTo(found + 1); 


在 上 面 的 代码 中 HE © Autowired 标注 实例 变量 clinicService 为 被 测 应 


日 对 象 。 注 


解 @Test 标注 方法 shouldFindOwnersByLastName() 等 为 测试 方法 。 注 解 @Transactional 


标注 方法 shouldInsertOwner() 在 自己 的 事务 中 执行 。 


在 类 AbstractClinicServiceTests 的 子 类 中 应 当 用 注解 @ContextConfiguration 指明 Spring 
context 配置 文件。 类 AbstractClinicServiceTests 有 = 4+ 28: ClinicServiceJdbcTests 、 
ClinicServiceJ paTests 和 СііпісЅегуісеЈраТеѕіѕ „ f#J 如 , 子 类 ClinicServiceJdbeTests 的 主要 代 


ШШЕ: 


package org. springframework. samples. petclinic. service; 
//import … 
(@ContextConfiguration(locations = {"classpath:spring/business - config. xml"]) 


@RunWith(SpringJUnit4ClassRunner. class) 
@ActiveProfiles("jdbe") 
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public class ClinicServiceJdbcTests extends AbstractClinicServiceTests { 
) 


在 上 面 的 代码 中 ,注解 @ContextConfiguration(locations 指明 了 Spring context 配置 文 
件 为 classpath:spring/business-config. xml, 被 标注 的 类 ClinicServiceJdbcTests 将 读 取 配 
置 文件 business-config. xml。 注 解 @RunWith (SpringJUnit4ClassRunner. class) 标注 类 
ClinicServiceJdbcTests 在 SpringJUnit4 运行 器 中 运行 。 注 解 @ActiveProfiles("jdbec" ) 标 注 
类 ClinicServiceJdbcTests 加 载 ApplicationContext 时 激活 bean 定义 profile(jdbc)。 在 配 
置 文件 business-config. xml 中 已 经 定义 好 了 三 种 bean 定义 profile: jdbc,jpa 和 spring- 
data-jpa. 

包 org. springframework. samples. petclinic. web 中 有 六 个 测试 类 : CrashControllerTests 、 
OwnerControllerTests、PetControllerTests、PetTypeFormatterTests、VetControllerTests 
和 VisitControllerTests。 分 别 对 六 个 控制 器 类 CrashController, OwnerController, 
PetController, Pet TypeFormatter, VetController 和 VisitController 进行 测试 。 

下 面 以 类 CrashControllerTests 为 例 , 对 这 六 个 控制 器 类 进行 分 析 。 


package org. springframework. samples. petclinic. web; 
/ import -- 


@RunWith(SpringJUnit4ClassRunner. class) 

@ContextConf iguration({"classpath: spring/mvc — core — config. xml", "classpath: spring/mvc — 
test – config. xml"}) 

@WebAppConf iguration 

public class CrashControllerTests { 


@Autowired 
Private CrashController crashController; 


@Autowired 
private SimpleMappingExceptionResolver simpleMappingExceptionResolver; 


private MockMvc mockMvc; 


@Before 
public void setup() { 
this. mockMvc = MockMvcBuilders 
. standaloneSetup(crashController) 
. SetHandlerExceptionResolvers(simpleMappingExceptionResolver) 
. build(); 
} 


@Test 
public void testTriggerException() throws Exception { 
mockMvc. perform(get("/oups") ) 
.andExpect(view().name("exception")) 
. andExpect(model().attributeExists("exception")) 
.andExpect(forwardedUrl("exception")) 
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.andExpect(status(). isOk()); 


) 


在 上 面 的 代码 中 ,注解 @Autowired 标注 了 两 个 被 测 类 : CrashController 和 SimpleMa 
ppingExceptionResolver。 注 解 @WebAppConfiguration 标注 测试 类 CrashControllerTests 
加 载 WebApplicationContext。 注 解 @ WebAppConfiguration 必需 和 注解 @ ContextConfiguration 
一 起 使 用 。 注 解 @WebAppConfiguration 的 默认 值 file: src/main/webapp 指定 了 Web 应 
用 的 根 路 径 。 方 法 setup() 给 实例 变量 mockMvc 赋值 (创建 一 个 模拟 MVC 测试 环境 ) 。 方 
法 testTriggerException () 中 的 代码 mockMve. perform( get ("/oups")) 执行 一 个 请 求 ; 代码 . 
andExpect(view(). name("exception") ) 添 加 验证 断言 。 换 句 话 说 ,方法 testTriggerException О 
的 作用 是 ,如 果 访 问 http://WebApplicationContext/oups 时 ,那么 视图 层 (view) 和 模型 层 
(modeD) 应 当 出 现 异常 ,页 面 应 当 重 定向 到 异常 页 面 ,测试 通过 。 


Ges 


任务 1: 参照 9. 2 节 , 创 建 一 个 简单 Spring Boot 应 用 ,然后 运行 ,测试 这 个 Spring Boot 
应 用 。 
任务 2: 参照 9. 3 Yi. dE STS 中 导入 示例 项 目 源 代码 ,分 析 代码 ,执行 测试 。 
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本 章 主 要 内 容 

Android App 测试 简介 
Android App 测试 工具 
Android App 测试 演练 
知识 拓展 : Appium 介绍 


移动 应 用 在 企业 的 地 位 越 来 越 重 要 ,消费 者 对 移动 设备 的 要 求 也 越 来 越 高 。 为 适应 这 
一 需求 ,测试 团队 必须 在 移动 设备 推出 市 场 之 前 ,对 其 性 能 进行 一 系列 的 评估 和 测试 。 然 
而 ,这 是 一 项 既 耗 时 又 耗资 源 的 工作 ,尤其 是 移动 设备 的 种 类 、 型 号 繁多 ,移动 设备 的 自动 化 
测试 非常 复杂 。 如 何 更 有 效 地 进行 移动 应 用 的 测试 是 我 们 必须 面 对 的 问题 。 


fo.1 什么 是 Android App 测试 
本 节 首 先 简要 介绍 了 Android App 测试 ,然后 介绍 了 Android App 测试 的 常见 工具 。 


10.1.1 Android App 测试 简介 


Android 是 一 种 基于 Linux 的 自由 及 开放 源 代 码 的 操作 系统 ,主要 使 用 于 移动 设备 ,如 
智能 手机 和 平板 电脑 ,由 Google 公司 和 开放 手机 联盟 领导 及 开发 。 

Android App 是 指 基于 Android 操作 系统 的 移动 应 用 ,由 于 Android App 是 一 个 新 型 
的 软件 ,从 它 诞生 开始 就 对 软件 测试 非常 重视 。Android App 的 开发 语言 是 Java 编程 语 
言 ,可 以 用 Java 集成 开发 工具 (例如 Eclipse 或 IntelliJ IDEA) 开 发 Android App, Google 
提供 了 Android App 的 集成 开发 环境 Android Studio。 

Android Studio 以 简化 测试 为 设计 宗旨 。 只 需 完成 几 次 单 击 操作 , 便 可 建立 一 个 在 本 
地 JVM 上 运行 的 JUnit 测试 ,或 建立 一 个 在 设备 上 运行 的 仪器 测试 。 

当然 ,也 可 以 通过 集成 测试 框架 来 扩展 测试 能 力 , 例 如 可 以 集成 Mockito(mockito 是 
Java 程序 单元 测试 mock 框架 ) 在 本 地 单元 测试 中 测试 Android API 调用 ,以 及 集成 
Espresso 或 UI Automator 在 仪器 测试 中 演练 用 户 交 互 。 

可 以 利用 Espresso 测试 记录 器 自动 生成 Espresso 测试 。 

Google 用 测试 金字 塔 描述 了 Android App 的 三 个 测试 级 别 : 单元 测试 ,集成 测试 和 UI 
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测试 ,如 图 10.1 所 示 。 

Google 建 议 这 三 个 级 别 的 测试 在 
Android App 测试 中 所 占 的 百分比 分 别 为 
70% .20% 、10%。 测试 级 别 

Android 框架 包含 了 一 个 测试 框架 ,用 A 
于 对 Android App 进行 测试 。SDK 工具 包 A 
含 了 设置 和 运行 测试 的 工具 。Android SDK 


包含 了 三 个 包 : android. test, android. test. 测试 工作 量 
mock 和 android. test. suitebuilder. 10.1 Android App 测试 金字 塔 
* android. test: H] TF 3⁄1 Android W 
试用 例 和 测试 套件 。 


android. test. mock: 为 各 种 Android App 构件 提供 了 实用 类 ( 桩 或 模拟 类 ) 。 
android. test. suitebuilder: 支持 Test Runner 的 实用 类 。 


10.1.2 Android App 测试 工具 
以 下 介绍 几 种 Android App 测试 工具 。 


1. Robotium Android 测试 工具 


Robotium 是 一 款 经 常 使 用 的 自动 化 测试 工具 软件 ,支持 Android, 

Robotium 是 一 个 免费 的 Android UI 测试 工具 。 它 适用 于 为 不 同 的 Android 版 本 和 子 
版 本 测试 自动 化 。 软 件 开发 人 员 经 常 把 它 描述 为 Android Selenium。Robotium 测试 是 用 
Java 写 的 。 事 实 上 ,Robotium 是 一 个 单元 测试 库 。 

但 通过 Robotium 创建 测试 需要 花费 很 多 时 间 和 努力 ,因为 为 了 自动 化 测试 还 需要 修 
改 程序 源 代码 。 该 工具 也 不 适合 与 系统 软件 的 交互 , 它 不 能 锁定 和 解锁 智能 手机 或 平板 电 
脑 。Robotium 也 没有 录制 回放 功能 ,也 不 提供 截图 。 

详 见 官网 https://github. com/robotiumtech/robotium(http://www. robotium. org), 


2. MonkeyRunner Android App 测试 工具 


MonkeyRunner 是 一 款 流行 的 Android 测试 工具 ,用 于 自动 化 功能 测试 。 

这 个 工具 比 Robotium 低 一 个 层次 。 它 不 必 处 理 源 代码 来 做 自动 化 测试 ; 可 以 用 
Python 写 , 并 且 可 以 使 用 录制 工具 来 创建 测试 。 

MonkeyRunner 可 以 连接 到 计算 机 或 模拟 真实 设备 运行 测试 。 该 工具 有 一 个 接口 ,用 
它 来 控制 智能 手机 、 平 板 电脑 或 外 部 模拟 器 的 Android 代码 。 

这 个 测试 工具 的 缺点 是 , 它 必 须 为 每 个 设备 编写 脚本 。 另 一 个 问题 是 ,每 次 测试 程序 的 
用 户 界面 变化 都 需要 调整 测试 脚本 。 


3. Ranorex Android App 测试 工具 


Ranorex 不 仅 可 以 支持 最 新 Android 版 本 ,还 支持 从 Android 2. 2 开始 的 早期 版 本 和 
分 支 版 本 。 


XY 
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Ranorex 的 优势 是 它 有 详细 的 截屏 报告 。 它 能 通过 WiFi 连接 智能 手机 和 平板 电脑 。 

使 用 这 个 Android 测试 工具 的 自动 化 测试 工程 师 不 必 使 用 XML 数据 格式 ,就 可 以 详 
细 编 写 数据 驱动 的 测试 。Ranorex 使 自动 化 测试 工程 师 只 要 单 击 鼠 标 就 可 容易 地 创建 测 
试 。 它 允许 详细 声明 额外 的 程序 模块 ,来 用 于 在 后 期 开发 周期 中 测试 更 复杂 的 场景 。 

它 是 一 个 商业 的 移动 应 用 工具 ,其 许可 价格 为 1990 欧元 。 不 过 Ranorex 搜索 功能 相当 
18; 它 需要 30s 来 完成 这 样 的 操作 。 我 们 必须 为 Ranorex 配备 АРК 文件 设备 ,否则 无 法 通 
过 这 个 工具 实现 自动 化 测试 ,因为 它 只 能 在 APK 文件 设备 上 工作 。 


详 见 官网 https://www. ranorex. com。 
4. Appium Android App 测试 自动 化 框架 


这 是 一 个 可 以 为 iOS 和 Android 做 自动 化 测试 的 框架 。 它 是 一 个 开源 工具 。 它 支持 
2.3 及 以 后 的 Android 版 本 。Appium 利用 WebDriver 接口 运行 测试 。 它 支持 多 种 编程 语 
言 ,如 Java、C# „Ruby 和 其 他 在 WebDriver 库 中 的 语言 。 

它 可 以 控制 移动 设备 上 的 Safari 和 Chrome。 这 样 测试 移动 网 站 可 使 用 Appium 和 这 
些 浏览 器 。 

一 些 自动 化 测试 工程 师 抱 怨 说 , 它 没 有 详细 的 报告 。 其 弱点 还 有 减少 了 在 移动 设备 上 
的 XPath 支持 。 

详 见 官网 http: //appium. io, 


5. UI Automator Android App 测试 自动 化 工具 


这 款 工具 是 Google 最 近 发 布 的 。 它 支持 从 4. 1 开始 的 Android 版 本 。 这 样 就 要 再 选 
择 另 一 个 Android 应 用 测试 工具 来 做 早期 版 本 自动 化 测试 。UI Automator 能 够 与 各 种 
Android 软件 产品 交互 ,包括 系统 中 的 应 用 。 这 使 UI Automator 可 以 锁定 和 解锁 智能 手机 
或 平板 电脑 。 

通过 这 个 工具 创建 的 脚本 可 以 在 许多 不 同 的 Android 平台 上 执行 。 它 可 以 重 现 复杂 的 
用 户 操作 动作 。 

UI Automator 也 可 以 利用 一 个 设备 的 外 部 按键 ,如 回放 键 , 音 量 调节 键 \ 开 关键 来 
控制 。 

它 可 以 集成 测试 框架 TestrNG。 在 这 种 情况 下 ,UI Automator 可 以 生成 丰富 和 详细 的 
报告 ,类 似 于 Ranorex 生成 报告 。 另 外 ,这 个 工具 搜索 速度 非常 快 。 

软件 测试 专家 发 现 UI Automator 是 一 款 适用 于 许多 Android 平台 的 移动 应 用 测试 。 
它 是 一 款 最 适合 Android 应 用 测试 的 工具 之 一 ,因为 它 是 由 Google 专门 为 这 个 操作 系统 发 
布 的 。 

通常 约 有 80% 的 新 软件 Bug 能 在 所 有 支持 的 平台 上 重 现 。 因 此 ,一 个 可 执行 在 广泛 使 
用 的 平台 上 的 移动 测试 工具 是 可 以 发 现 高 达 80% 的 缺陷 。 其 余 20% 将 会 在 其 他 平台 上 被 
发 现 。 这 意味 着 ,在 大 多 数 情况 下 ,在 更 少 的 测试 平台 上 完整 地 做 测试 比 在 众多 平台 上 和 匆忙 
测试 更 好 。 

目前 ,Android 操作 系统 设备 上 约 66% 使 用 的 是 Android 4.1。 这 就 是 许多 自动 化 测试 
工程 师 认 定 UI Automator 是 最 合适 的 解决 方案 的 原因 。 
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Ranorex 经 常用 于 早期 的 Android 版 本 测试 。 


详 见 官网 https://developer. android. com/training/testing/ui-automator, 
6. TestBird 测试 平台 


这 个 工具 平台 是 TestBird 前 不 久 发 布 的 。TestBird 自动 回归 测试 平台 为 手 游 /App 开发 
者 提供 App 自动 化 回归 测试 ,简单 单 击 自动 生成 图 片 用 例 ; 多 台 手 机 同时 执行 用 例 回 归 ; 基 
线 对 比 , 找 出 问题 ; 调整 基线 ,维护 测试 用 例 ; 一 键 生成 报告 ,全面 提升 测试 效率 和 质量 。 

TestBird 最 初 是 从 手 游 测试 开始 起 步 , 在 手 游 圈 积累 了 很 高 的 知名 度 , 目 前 在 逐步 向 
App 测试 领域 进军 ,同时 TestBird 也 加 入 了 智能 硬件 的 测试 领域 。 基 于 全 球 首创 的 对 象 识 
别 技术 ,TestBird 可 以 深入 到 移动 App& 游戏 内 部 所 有 功能 的 深度 解析 能 力 。TestBird 建 
立 了 云 手机 、 云 测试 和 云 分 析 三 大 测试 平台 ,通过 自助 App 功能 测试 .远程 真 机 调试 、 真 机 
兼容 性 测试 ,真人 体验 测试 、 真 人 压力 测试 和 崩溃 分 析 等 ,为 移动 应 用 提供 从 研发 到 上 线 再 
到 运营 的 一 站 式 质量 管理 服务 。 

详 见 官网 https://www. testbird. com, 


10.2 Android App 测试 起 步 


本 节 介绍 使 用 Android Studio 开发 Android App 测试 的 一 般 步 骤 。 
10.2.1 从 模板 新 建 Android Studio WA 


启动 Android Studio, 如 图 10. 2 所 示 。 
Гев Welcome to Android Studio — “NE ~~ Gok) 


| @ 


Android Studio 


Version 3.1.3 


Ж Start a new Android Studio project 

Eè Open an existing Android Studio project 

+ Check out project from Version Control + 
[Ё Profile or debug APK 

wf Import project (Gradle, Eclipse ADT, etc.) 


DÝ Import an Android code sample 


@ Events; 亲 Configure - Get Help + 
= 


Р 10.2 Android Studio 启动 界面 
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单 击 Start a new Android Studio project 链接 ,输入 Application name, Company 
domain, Project location, 单 击 “ 下 一 个 ”按钮 ,如 图 10. 3 所 示 。 


r 
ff Create New Project — 


үт Create Android Project 


Application name 


Test101 


Company domain 


tesjexample.com 


Project location 


H:\Workspaces\AndroidStudioProjects\Test101 
| Package name 


com.example-testtest101 Edit 


О Include C++ support 
C] Include Kotlin support 


Sa] | ажо 


图 10.3 输入 App 名 称 


选择 设备 类 型 .API 版 本 


i“ 下 一 个 ”按钮 ,如 图 10.4 Bros. 


ff Create New Project 


LE Target Android Devices 


Select the form factors and minimum SDK 
Some devices require additional SDKs. Low API levels target more devices, but 
offer fewer API features. 
EZ] Phone and Tablet 
[API 19: Android 4.4 (KitKat) = 


By targeting АРІ 19 and later, your app will run on 
approximately 90.1% of devices. 


L] Include Android Instant App support 


Help me choose 


L] Wear 
| API 21: Android 5.0 (Lollipop) s 
ow 
АРІ 21: Android 5.0 (Lollipop) ~ 


C Android Auto 
О Android Things 


+—+@ FEANN BRO 


=“ = — 


图 10.4 选择 App 的 运行 设备 
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选择 Activity 模板 , 单 击 “ 下 一 个 ”按钮 ,如 图 10.5 所 示 。 


r 
® Create New Proj 


Empty Activity Fullscreen Activity Google AdMob Ads Activity 


Google Maps Activity 


Master/Detail Flow 


i-e | ERS] xo 


= 


FA 10.5 选择 Activity 模板 


设置 Activity. 88 A Activity Name, Layout Name 和 Title, 单 击 “ 完 成 ”按钮 ,如 图 10. 6 所 示 。 


Н 
ff Create New Proj ке] 


KR Configure Activity 


Creates a new login activity, 
allowing users to optionally 
sign in with Google+ or enter 
an email address and 
password to log in to or 
register with your application. 


Activity Name: ^ |LoginActivity 


Sr 
Title: 


= вжо [ =e | 


图 10.6 设置 Activity 
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等 待 Gradle 完成 构建 任务 ,如 图 10.7 所 示 。 


Пв Wecometo Android Syiog = „ = = [=i 


= 
Android Studio 
Version 3.1.3 
P "AP "n 
Gradle: Compiling script into cache [==] 
M 


[€ Profile or debug APK 
uf Import project (Gradle, Eclipse ADT, etc.) 
tif Import an Android code sample 


@ Events. # Configure + Get Help + 


图 10.7 Gradle 正在 构建 App 


Gradle 构建 完成 后 ,Android Studio 的 界面 如 图 10. 8 所 示 。 


esti « b 
хер SEO WEY 号 航 (N) 代码 (Q MO BOR 构建 (B) 运行 (U) IAD VCS(S) SOW WA) 
) Bi src ) В main ) ЁШ java ) ЁШ com ) DI example } Ë test ) Ёа test101) 人 [zapp ~ > ^ d$ ^l ü $E ARA А | 
к Zal © LoginActivityjava. @ 
~ ° 
кей i 1 package com. example. test. test101; PH 
manifests = 
~ Mjava z - 
в з import ... = 
© LoginActivity 36 7] 
à ~ És comexampletesttest101 (android s7 jew 
п ааа ОНЫ * A login screen that offers login via email/password. 
Y Ea comexampletestiestiO1 (es) | 22 
H Æ ExompleUnitTest i 
$ > meres 10 ы public class Loginkctivity extends AppCompatActivity impleme 
* Y @ Gradle Scripts 1 = 
© build.gradle (Project: Test101) 42 m ч 
© build gradle (Module: арр) 43 + Id to identity READ CONTACTS permission request. 
1 iliaradie properties (Global Properties)| * 
š iË gradle-wrapper.properties (Gradle V 
а В proguard-nies.pro @roGuard Res ШЙ private static final int REQUEST_READ_CONTACTS = 0; 
il gradle.properties (Project Properties) 15 - 
t (Ë settings.gradle (Project Settings) ат d zl 
š fı local.properties (SDK Location) 48 * À dummy authentication store containing known user name4 
š 49 * TODO: remove after connecting to a real authentic: 
* 
国 Teminal EHR = &logcst Ф торо @ Event Log 
[E] Grodle build finished in 44s 85ms (2 S828) 1л CRU: UTF-8: Context: «no contet» @ 


10.8 ”从 模板 新 建 的 Android Studio 项 目 
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10.2.2 Android Studio 项 目 分 析 


从 LoginActivity 模板 创建 的 Android Studio 项 目 有 三 个 类 : LogoinActivity、 
ExamplelnstrumentedTest 和 ExampleUnitTest. 

LogoinActivity: 它 是 Android App 的 登录 屏幕 类 ,提供 了 输入 用 户 名 密码 登录 系统 
的 功能 。 


package com. example. test. test101; 
//import … 


/ ++ 
* А login screen that offers login via email/password. 
*/ 
public class LoginActivity extends AppCompatActivity implements LoaderCallbacks < Cursor > { 


/ жж 
* Id to identity READ_CONTACTS permission request. 
*/ 

private static final int REQUEST_READ_CONTACTS = 0; 


f ** 
* A dummy authentication store containing known user names and passwords. 
* TODO: remove after connecting to a real authentication system. 
*/ 
private static final String[] DUMMY CREDENTIALS = new String[ ]{ 
"foo@ example. com:hello", "bar@example. com: world" 
}; 
/ xx 
* Keep track of the login task to ensure we can cancel it if requested. 
x/ 
private UserLoginTask mAuthTask - null; 


// UI references. 

private AutoCompleteTextView mEmailView; 
private EditText mPasswordView; 

private View mProgressView; 

private View mLoginFormView; 


@Override 
protected void onCreate(Bundle savedInstanceState) { 
super. onCreate(savedInstanceState) ; 
setContentView(R. layout. activity login); 
// Set up the login form. 
mEmailView = (AutoCompleteTextView) findViewById(R. id. email); 
populateAutoComplete( ) ; 


mPasswordView = (EditText) findViewById(R. id. password); 
nPasswordView. setOnEditorActionListener(new TextView. OnEditorActionListener() { 


250 


`. 


软件 测试 实战 教程 


@override 
public boolean onEditorAction(TextView textView, int id, KeyEvent keyEvent) ( 
if (id == EditorInfo. IME ACTION DONE || id == EditorInfo. IME_NULL) { 
attemptLogin(); 
return true; 


) 


return false; 


р; 


Button mEmailSignInButton = (Button) findViewById(R. ій. email sign in button); 
mEmailSignInButton. setOnClickListener(new OnClickListener() ( 
@override 
public void onClick(View view) { 
attemptLogin() ; 


ni 


mLoginFormView = findViewById(R. id. login form); 
mProgressView - findViewById(R. id. login progress); 


private void populateAutoComplete() ( 
if (!mayRequestContacts()) ( 
return; 


getLoaderManager().initLoader(0, null, this); 


private boolean mayRequestContacts() { 
if (Build. VERSION. SDK INT < Build. VERSION CODES.M) { 
return true; 
} 
if (checkSelfPermission(READ CONTACTS) == PackageManager.PERMISSION_GRANTED) { 
return true; 
) 
if (shouldShowRequestPermissionRationale(READ CONTACTS)) { 
Snackbar. make (mEmailView, R. string. permission rationale, Snackbar. LENGTH _ 


INDEFINITE) 
. setAction(android. R. string. ok, new View. OnClickListener() ( 
@override 
G)Targethpi(Build. VERSION_CODES. M) 
public void onClick(View v) { 
requestPermissions(new String[ ]{READ_CONTACTS}, REQUEST READ 
_CONTACTS) ; 
} 
n; 
) eise( 


requestPermissions(new String[ ]{READ_CONTACTS}, REQUEST READ CONTACTS); 
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return false; 


/ xx 
* Callback received when a permissions request has been completed. 
*/ 
@override 
public void onRequestPermissionsResult(int requestCode, @NonNull String[] permissions, 
@NonNull int[] grantResults) { 
if (requestCode == REQUEST READ CONTACTS) { 
if (grantResults. length == 1 && grantResults[0] == PackageManager. PERMISSION - 
populateAutoComplete( ) ; 


"m 
* Attempts to sign in or register the account specified by the login form. 
* If there are form errors (invalid email, missing fields, etc.), the 
* errors are presented and no actual login attempt is made. 
*/ 
private void attemptLogin() { 
if (mAuthTask != null) { 
return; 


// Reset errors. 
mEmailView. setError(null); 
mPasswordView. setError(null); 


// Store values at the time of the login attempt. 
String email = mEmailView.getText().toString(); 
String password = mPasswordView.getText().toString(); 


boolean cancel 


false; 
null; 


View focusView 


// Check for a valid password, if the user entered one. 

if (!TextUtils. isEmpty(password) && ! isPasswordValid(password)) { 
mPasswordView.setError(getString(R.string.error invalid password)); 
focusView - mPasswordView; 
cancel - true; 


// Check for a valid email address. 

if (TextUtils. isEmpty(email)) { 
mEmailView. setError(getString(R. string. error_field_required) ) ; 
focusView = mEmailView; 
cancel = true; 
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} else if (!isEmailValid(email)) { 
mEmailView. setError(getString(R. string. error_invalid_email)); 
focusView = mEmailView; 
cancel = true; 


if (cancel) { 
// There was an error; don't attempt login and focus the first 
// form field with an error. 
focusView. requestFocus( ) ; 

} else { 

// Show a progress spinner, and kick off a background task to 
// perform the user login attempt. 
showProgress( true) ; 
mAuthTask = new UserLoginTask(email, password) ; 
nAuthTask. execute( (Void) null); 


private boolean isEmailValid(String email) ( 
//Т000: Replace this with your own logic 
return email. contains("@") ; 


private boolean isPasswordValid(String password) { 
//Т000: Replace this with your own logic 
return password. length() > 4; 


} 
/x 
* Shows the progress UI and hides the login form. 
*/ 
@TargetApi(Build. VERSION CODES. HONEYCOMB MR2) 
private void showProgress(final boolean show) ( 
// On Honeycomb MR2 we have the ViewPropertyAnimator APIs, which allow 
// for very easy animations. If available, use these APIs to fade - in 
// the progress spinner. 
if (Build. VERSION. SDK INT >= Build. VERSION_CODES. HONEYCOMB MR2) { 
int shortAnimTime = getResources().getInteger(android.R. integer. config_ 
shortAnimTime) ; 


mLoginFormView. setVisibility(show ? View. СОМЕ : View. VISIBLE) ; 
mLoginFormView. animate(). setDuration(shortAnimTime) . alpha( 
show ? 0 : 1). setListener(new AnimatorListenerAdapter() { 
@Override 
public void onAnimationEnd(Animator animation) { 
nLoginFormView. setVisibility(show ? View. GONE : View. VISIBLE) ; 
} 
ni 


mProgressView. setVisibility(show ? View. VISIBLE : View. СОМЕ); 
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mProgressView. animate(). setDuration(shortAnimTime) . alpha( 
show ? 1 : 0). setListener(new AnimatorListenerAdapter() { 
@Override 
public void onAnimationEnd(Animator animation) { 
mProgressView. setVisibility(show ? View. VISIBLE : View. GONE); 
} 
ni 
) else ( 
// The ViewPropertyAnimator APIs are not available, so simply show 
// and hide the relevant UI components. 
mProgressView. setVisibility(show ? View. VISIBLE : View. GONE) ; 
mLoginFormView. setVisibility(show ? View. GONE : View. VISIBLE) ; 


@Override 
public Loader < Cursor > onCreateLoader(int i, Bundle bundle) { 
return new CursorLoader(this, 
// Retrieve data rows for the device user's 'profile' contact. 
Uri. withAppendedPath(ContactsContract. Profile. CONTENT_URI, 
ContactsContract. Contacts. Data. CONTENT _ DIRECTORY ), 
Prof ileQuery. PROJECTION, 


// Select only email addresses. 
ContactsContract. Contacts. Data. MIMETYPE + 

" = ?", new String[ ] (ContactsContract. CommonDataKinds. Email 
.CONTENT ITEM TYPE), 


// Show primary email addresses first. Note that there won't be 
// a primary email address if the user hasn't specified one. 
ContactsContract.Contacts.Data.IS PRIMARY * " DESC"); 


@override 
public void onLoadFinished(Loader < Cursor > cursorLoader, Cursor cursor) { 
List < String> emails = new ArrayList <>(); 
cursor. moveToFirst() ; 
while (!cursor. isAfterLast()) { 
emails. add(cursor. getString(ProfileQuery. ADDRESS) ) ; 
cursor. moveToNext( ) ; 


addEmailsToAutoComplete(emails) ; 


(GOverride 
public void onLoaderReset (Loader < Cursor cursorLoader) { 


private void addEmailsToAutoComplete(List < String> emailAddressCollection) { 
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//Create adapter to tell the AutoCompleteTextView what to show in its dropdown list. 
ArrayAdapter < String> adapter = 
new ArrayAdapter <>(LoginActivity. this, 
android. R. layout. simple_dropdown_item_lline, emailAddressCo 
llection) ; 


mEmailView. setAdapter(adapter) ; 


private interface ProfileQuery { 
String[ ] PROJECTION = { 
ContactsContract. CommonDataKinds. Email. ADDRESS, 
ContactsContract. CommonDataKinds. Email. IS PRIMARY, 
}; 


int ADDRESS = 0; 
int IS_PRIMARY = 1; 


"m 
* Represents an asynchronous login/registration task used to authenticate 
* the user. 
*/ 
public class UserLoginTask extends AsyncTask < Void, Void, Boolean> { 


private final String mEmail; 
private final String mPassword; 


UserLoginTask(String email, String password) { 
mEmail = email; 
mPassword = password; 


@override 
protected Boolean doInBackground(Void... params) { 
// TODO: attempt authentication against a network service. 


try { 
// Simulate network access. 
Thread. sleep(2000) ; 

} catch (InterruptedException e) { 
return false; 


for (String credential : DUMMY CREDENTIALS) { 
String[] pieces = credential. split(":"); 
if (pieces[0]. equals(mEmail)) { 
// Account exists, return true if the password matches. 
return pieces[1]. equals(mPassword); 
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// TODO: register the new account here. 


return true; 


@Override 

protected void onPostExecute(final Boolean success) { 
mAuthTask = null; 
showProgress( false) ; 


if (success) { 
finish(); 
} else { 
mPasswordView. setError(getString(R. string. error_incorrect_ 


password) ) ; 
mPasswordView. requestFocus(); 


@override 

protected void onCancelled() { 
mAuthTask = null; 
showProgress( false) ; 


} 
ExampleInstrumentedTest; 它 是 真 机 单元 测试 类 。 


package com. example. test. test101; 


import android. content. Context; 
import android. support. test. InstrumentationRegistry; 
import android. support. test. runner. AndroidJUnit4; 


import org. junit. Test; 
import org. junit. runner. RunWith; 


import static org. junit. Assert. * ; 


/ ++ 

* Instrumented test, which will execute оп an Android device. 
* 
* @see <a href = "http: //d. android. com/tools/testing"> Testing documentation </a> 
*/ 
@RunWith(AndroidJUnit4. class) 
public class ExampleInstrumentedTest { 

@Test 

public void useAppContext() { 

// Context of the app under test. 
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Context appContext = InstrumentationRegistry.getTargetContext(); 
assertEquals("com. example. test. test101", appContext. getPackageName( ) ) ; 


} 

ExampleUnitTest: 它 是 模拟 单元 测试 类 。 
package com. example. test. test101; 

import org. junit. Test; 

import static org. junit. Assert. * ; 


[xx 
* Example local unit test, which will execute on the development machine (host). 
* 
* @see «a href = "http://d. android. com/tools/testing"» Testing documentation </a> 
*/ 
public class ExampleUnitTest { 
@Test 
public void addition_isCorrect() { 
assertEquals(4, 2 + 2); 
) 


10.2.3 运行 App 和 测试 


右 击 LoginActivity 类 ,选择 “运行 Login Activity” 莱 单项 将 运行 App. 
右 击 ExampleInstrumentedTest 类 ,选择 “运行 ExamplelInstrumentedTest” 菜 单项 将 运 


行 真 机 单元 测试 。 


Tiii ExampleUnitTest 类 ,选择 “运行 ExampleUnitTest” 菜 单项 将 运行 模拟 单元 测试 。 


(0.3 Android App 测试 演练 


本 节 先 介绍 App 单元 测试 `UI 测 试 、 集 成 测试 .性 能 测试 的 一 般 概念 ,然后 介绍 Google 


提供 的 测试 示例 。 


10.3.1 App 单元 测试 
第 4 章 单元 测试 的 一 般 方 法 适用 于 Android App 的 单元 测试 ,特别 地 ,我 们 一 般 用 单元 


测试 对 Android App 包含 处 理 逻 辑 的 单元 进行 测试 ,而 处 理 复杂 的 UT 交互 事件 的 单元 不 
适合 使 用 单元 测试 ,应 当 使 用 UT 测试 框架 。 


Android App 单元 测试 可 以 分 为 以 下 两 种 : 
。 模拟 单元 测试 一 一 是 指 在 开发 机 的 JVM 上 运行 的 单元 测试 。 
。 真 机 单元 测试 一 一 是 指 运行 在 真 机 或 模拟 器 上 的 单元 测试 。 
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1. 模拟 单元 测试 


如 果 测 试 不 依赖 或 很 少 依赖 于 Android, 那 么 应 当 使 用 模拟 单元 测试 。 模 拟 单元 测试 
通常 使 用 Mock 框架 ,例如 Mockito。 

模拟 单元 测试 的 一 般 步 又 如 下 : 

。 设置 测试 环境 。 

。 创建 模拟 单元 测试 类 。 

* 模拟 对 Android 的 依赖 。 

。 运行 模拟 单元 测试 。 

2. 真 机 单元 测试 


真 机 单元 测试 可 以 利用 Android API 和 支持 的 其 他 API( 例 如 ,Android Test) 。 如 果 
测试 需要 访问 设备 信息 (例如 ,目标 App 的 Context). ak Ж ЖК Android 组 件 ( 例 如 ， 
Parcelable 或 SharedPreference 对 象 ) 的 真实 实现 ,就 需要 创建 真 机 单元 测试 。 

真 机 单元 测试 的 一 般 步骤 如 下 : 
设置 测试 环境 。 
创建 真 机 单元 测试 类 。 
创建 测试 套件 。 

。 运行 真 机 单元 测试 。 


10.3.2 App UI 测试 


UI 测试 的 目的 是 确保 App 满足 功能 性 要 求 ,UI 测试 的 方法 有 两 种 : 一 种 是 人 工 测 试 ， 
测试 员 操作 App, 通 过 用 户 界 面 与 App 交互 ,验证 App 能 够 正常 运行 ; 另 一 种 是 UI 自动 化 
测试 ,使 用 UI 测试 框架 ,编写 测试 代码 ,模拟 人 工 操作 App ,进行 特定 场景 的 测试 。 

UI 自动 化 测试 可 以 分 为 以 下 两 种 : 

。 单 应 用 中 的 UI 测试 。 这 种 类 型 的 测试 目标 是 验证 被 测 App 在 用 户 执 行 特 定 动作 

或 在 交互 活动 中 输入 特定 输入 时 能 按 预 期 进行 。 它 允许 你 检查 被 测 App 响应 用 户 
交互 返回 正确 的 UI 输出。UI 测试 框架 Espresso 允许 你 以 编程 方式 模拟 用 户 行为 
并 测试 复杂 的 App 内 部 用 户 交 互 。 
跨 应 用 的 UI 测试。 这 种 测试 的 目标 是 验证 不 同 用 户 App 之 间或 用 户 App 和 系统 
App 之 间 能 够 正常 交互 。 例 如 ,用 户 可 能 想 测试 他 的 相机 App 与 第 三 方 社交 媒体 
App 或 者 默认 的 Android 照片 App 能 够 正确 共享 图 片 。 支 持 跨 应 用 程序 交互 的 UI 
测试 框架 ,如 UI Automator, 人 允许 用 户 为 这 样 的 场景 创建 测试 。 


1. 单 应 用 中 的 UI 测试 


Android 测试 提供 的 Espresso 测试 框架 提供 了 编写 UI 测 试 的 API, 使 得 我 们 可 以 在 单 
个 应 用 中 模拟 用 户 与 App 的 交互 。Espresso API 是 真 机 测试 API, 使 用 AndroidJUnitRunner 
测试 运行 器 。 

单 应 用 中 的 UI 测试 的 一 般 步骤 如 下 : 
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(1) 设置 Espresso。 

(2) 创建 Espresso 测试 类 。 

(3) 使 用 ActivityTestRule。 

(4) 访问 UI 组 件 。 

(5) 指定 View Matcher。 

(6) 在 AdapterView 中 定位 View, 

(7) 执行 操作 。 

(8) 使 用 Espresso Intent 隔离 测试 Activity。 
(9) 使 用 Espresso Web 测试 WebView。 
(10) 验证 测试 结果 。 

(OD 在 真 机 或 模拟 器 上 运行 Espresso 测试 。 


2. 跨 应 用 的 UI 测试 
Android Test 提供 的 UI Automator 测试 框架 提供 了 编写 UI 测试 的 API, 使 得 我 们 可 以 与 


真 机 上 的 可 见 元 素 交 互 。UI Automator 测试 可 以 使 用 方便 的 描述 符 , 例 如 ,组 件 中 显示 的 文本 
或 内 容 描述 ,查找 UI 组 件 。UI Automator API 是 真 机 测试 API, 使 用 AndroidJUnitRunner 测 
试 运行 器 。 


跨 应 用 的 UI 测试 的 一 般 步 骤 如 下 : 
(1) 设置 UI Automator。 

(2) 检查 真 机 上 的 UI。 

(3) 确认 Activity 是 可 以 访问 的 。 
(4) 创建 UI Automator 测试 类 。 
(5) 访问 UI 组 件 。 

(6) 指定 selector, 

CD 执行 一 个 操作 。 

(8) 执行 一 组 操作 。 

(9) 执行 对 可 滚动 View 的 操作 。 
(10) 验证 测试 结果 。 

(OD 在 真 机 或 模拟 器 上 运行 Espresso 测试 。 


10.3.3 App 集成 测试 
如 果 App 使 用 了 一 些 用 户 不 能 与 其 直接 交互 的 组 件 , 例如 , Service 或 Content 


Provider, 就 必须 使 用 集成 测试 ,验证 这 些 组 件 工作 正常 。 


1. Service 的 测试 


Android 测试 提供 了 隔离 测试 Service 对 象 的 API。ServiceTestRule 类 是 一 个 JUnit 4 


规则 , 它 在 单元 测试 方法 运行 前 启动 Service, 在 单元 测试 完成 后 终止 Service, 


Service 测试 的 一 般 步骤 如 下 : 
CL) 设置 测试 环境 。 


(2) 创建 Service 集成 测试 。 
(3) 运行 Service 集成 测试 。 


2. Content Provider 的 测试 


810% Android App 测 试 


为 了 隔离 地 测试 Content Provider, 需 要 使 用 ProviderTestCase2 类 。ProviderTestCase2 类 
允许 我 们 使 用 Android Mock 对 象 类 (例如 ,IsolatedContext 和 MockContentResolver) 访 问 文件 


和 数据 库 。 


通过 编写 JUnit 4 测试 类 可 以 对 Content Provider 进行 集成 测试 。 

Content Provider 测试 的 一 般 步 又 如 下 : 

(1) 创建 ProviderTestCase2 的 子 类 。 

(2) 用 @RunWith(AndroidJUnit4. class) 标 注 测试 类 。 

(3) 指定 Android Test 提供 的 AndroidJUnitRunner 类 作为 默认 的 测试 运行 器 。 
(4) 设置 Context, 如 下 面 的 代码 片段 所 示 : 


@Override 


protected void setUp() throws Exception { 


super. setUp() ; 


setContext(InstrumentationRegistry.getTargetContext()); 


) 


10.3.4 App 性 能 测试 
App 性 能 测试 与 Web 应 用 的 性 能 测试 ( 见 第 7 章 ) 有 很 大 的 不 同 , 影 响 App 性 能 的 因 


素 如 表 10.1 所 示 。 


表 10.1 影响 App 性 能 的 因素 中 英文 对 照 表 
核心 因素 
ANR rates ANR 率 
Crash rates HABE 
Excessive wakeups 唤醒 次 数 过 多 
Stuck partial wake locks 部 分 唤醒 锁定 操作 卡 住 


其 他 因素 


Excessive background Wi-Fi scans 


后 台 WiFi 扫描 次 数 过 多 


下 xcessive background network usage 后 台 网 络 使 用 量 过 高 
App startup time 应 用 程序 启动 时 间 
Slow rendering 呈现 速度 慢 

Frozen frames 冻结 的 帧 
Permission denials 权限 否认 


Android 官方 提供 了 一 些 工 具 , 例 如 ,dumpsys、systrace 度量 UI 性能。 如 何 使 用 这 些 
工具 对 App 性 能 进行 度量 和 调 优 超 出 了 本 书 的 范围 。 下 面 以 一 个 自动 化 UI 性 能 测试 示例 
使 读者 体验 一 下 自动 化 UI 性 能 测试 。 


1. 下 载 示 例 代码 


使 用 如 下 的 命令 下 载 示例 代码 : 
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git clone https: //github. com/googlecodelabs/android-perf-testing. git 


或 在 下 载 地 址 https://github. com/googlecodelabs/android-perf-testing/archive/master. 
zip 直接 下 载 压缩 文件 android-perf-testing-master. zip。 解 压 后 应 当 有 一 个 文件 夹 android- 
perf-testing-master. 

打开 Android Studio, fE Android Studio 启动 屏幕 ( 见 图 10. 9) 单 击 Open an existing 
Android Studio project 链接 。 


Android Studio 


Version 3.1.3 


Ж Start a new Android Studio project 

= Open an existing Android Studio project 

Check out project from Version Control + 
[€ Profile or debug APK 

wf Import project (Gradle, Eclipse ADT, etc.) 


1 Import an Android code sample 


3* Configure + Get Help + 


图 10.9 Android Studio 启动 屏幕 


或 者 选择 File Open 菜单 项 。 在 Open File or Project 窗口 ,选择 android-perf-testing- 
master 文件 夹 下 的 文件 settings. gradle, 单 击 OK 按钮 ,如 图 10. 10 所 示 。 


В OpenfieorProject CR) 
RA OR ax o g Hide path 
droidStudioProjects\android-perf-testing-master\settings.gradle [4 
~ Ba AndroidStudioProjects 
> @ android-Activityinstrumentation-master 
У @ android-perf-testing-master 
> Sapp 

«ia buildsre 
Bn gradle 
й gitignore 
© build.gradle 
# CONTRIBUTING.md 
ifi gradle.properties 
il gradiew 
# gradiew.bat 
Й UCENSE 
id run perf tests.py 


> 
> 


oid-testing-master — _ 
‘le into the space above to ашу сте tin Pre ves 


ө oe] 医 至 到 


Р 10.10 Open File or Project 窗口 
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在 Android Studio 窗口 的 左上 和 角 选 择 Project 菜单 өзө 
项 ,打开 Project 导航 窗口 ,可 以 在 Android. Project. В Ы G+ ^x а а Ф 
Packages 等 视图 窗口 之 间 切 换 . 如 图 10. 11 所 示 。 

等 待 项 目 导 入 完成 ,Android Studio 底部 的 状态 栏 
显示 “Gradle build finished…”, 如 图 10. 12 所 示 。 

单 击 Android Studio 菜单 栏 上 绿色 Run 图 标 , 安 
装 和 运行 App, 如 图 10.13 所 示 。 

如 果 还 没有 连接 Android 设备 , 则 连接 Android 设 
备 。 从 设备 列表 中 选择 设备 运行 App, 如 图 10.14 所 示 。 


Packages 
Scratches 
Android 
Project Files 
Problems 


Structure 


图 10.11 切换 视图 窗口 


E Terminal 1% Build 三 ELogcat Ф TODO 
[E] Gradle build finished in 31s 475ms. 


图 10.12 Android Studio 底部 的 状态 栏 


+ 2 D зв гаң 
Run ‘app’ (Shift+F10) 


Create New Virtual Device 


Ө DD Use same selection for future launches [ок ]| cancel 


图 10.14 连接 设备 列表 


WER App 在 设备 上 运行 成 功 ,那么 显示 画面 如 图 10. 15 所 示 。 

这 个 示例 App 实现 了 如 下 的 简单 功能 : 

。 可 以 使 用 UPDATETEXT 更 新 TextView。 

* fiii; OPEN LIST VIEW 显示 ListView。 这 个 ListView 实现 有 各 种 性 能 问题 。 

。 触 击 OPEN RECYCLE RVIEW .显示 RecyclerView。 这 个 RecyclerView 消除 了 
ListView 实现 的 一 些 性 能 问题 。 


2. 示例 App 性 能 问题 分 析 


让 我 们 手工 检查 一 下 示例 App 的 卡 顿 现象 。 
运行 示例 App. fiit; OPEN LIST VIEW ,如 图 10.16 所 示 。 
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Automated Performance Testing Simple List Activity 


Hello world! 


Hello world! 
UPDATE TEXT 
OPEN LIST VIEW 


OPEN RECYCLER VIEW 


Contact 1 


Contact 2 


Contact 3 


Contact 4 


Contact 5 


Xx X3 X3 X Xx 


Æ 10.15 示例 App 主 画 面 图 10.16 Simple List Activity 


滚动 到 List 的 底部 ,滚动 得 越 多 , 卡 顿 越 严 重 。 这 是 因为 示例 App 在 以 每 16 毫秒 一 帧 
提供 浑 染 时 遇 到 了 麻烦 (这 是 大 多 数 UI 相关 的 性 能 问题 的 主要 原因 ) 。 因 此 ,Android 2: Bk 


Simple List Activity 


coltact 190 


图 10.17 GPU 呈现 模式 分 析 一 在 
屏幕 上 显示 为 条 形 图 


过 帧 并 导致 视觉 卡 顿 。 当 向 下 滚动 页 面 时 ,App 跳 过 的 
帧 会 越 来 越 多 ,直至 在 到 达 List 底部 前 崩溃 。 众 所 周 
知 , 性 能 问题 不 仅 与 App 有 关 , 而 且 与 设备 有 关 。 如 果 
使 用 高 端 设备 测试 这 个 示例 App, 或 许 看 不 到 卡 顿 现 
象 。 建 议 使 用 中 低 端 设备 测试 这 个 示例 App. 

当然 ,可 以 不 用 依赖 肉眼 观察 设备 上 的 卡 顿 现象 。 
在 大 多 数 Android 设备 上 ,有 一 个 开发 人 员 选 项 GPU 
rendering profile, 启 用 Show on screen as bars, 可 以 帮 
助 我 们 观察 卡 顿 现象 。 例 如 ,在 华为 PLK-TLo1H 手机 
上 , 单 击 “ 设 置 ”>“ 开 发 人 员 选 项 ”菜单 项 ,开启 “GPU 
旦 现 模式 分 析 ” 一 “在 屏幕 上 显示 为 条 形 图 ”"。 然 后 再 测 
试 示例 App。 屏 幕 将 显示 如 图 10.17 所 示 。 

在 Android 设备 屏幕 上 的 底部 /中 部 的 绿色 线 表 
HJ .在 向 泻 染 子 系统 提供 帧 时 ,应 用 程序 应 该 尝试 不 跨 
越 16 毫秒 的 重要 屏障 。 帧 被 绘制 为 横 跨 屏幕 的 水 平时 
间 序 列 ,每 个 矩形 条 表示 帧 。 和 矩形 条 的 高 度 表 示 绘 制 由 
的 时 间 , 当 线 的 任何 有 色 部 分 都 在 绿色 条 上 时 ,表示 丢 
失 的 帧 超时 16 毫秒 并 导致 卡 顿 。 和 矩形 条 的 颜色 表示 在 
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帧 泻 染 的 每 个 主要 阶段 花费 的 时 间 量 。 和 矩形 条 的 橙色 部 分 表示 示例 App 处 理 代码 的 时 间 ; 
这 个 示例 App 浪费 了 大 量 的 时 间 。 
当 观 察 到 卡 顿 现象 时 , 常 使 用 工具 Systrace 进行 深入 分 析 。 


3. 使 用 Systrace 进行 App 性 能 分 析 


Systrace 是 一 个 用 Python 编写 的 分 析 App 性 能 的 工具 ,在 文件 夹 android-sdk V 
platform-tools 下 有 一 个 文件 夹 systrace。 因 此 ,要 使 用 Systrace, 需 要 安装 Python, pylint 
和 pywin32。 我 们 安装 了 Python 2. 7, 

打开 Android Studio 终端 ,输入 命令 : 


python % ANDROID _ НОМЕ % /platform 一 tools/systrace/systrace. py - - time = 10 - o % 
userprofile % /trace. html gfx view res 


Systrace 将 运行 持续 10 秒 , 让 你 有 足够 的 时 间 重 现 前 面 看 到 的 卡 顿 现象 。 在 Systrace 
命令 还 在 运行 时 ,打开 示例 App 在 Simple List View 中 滚动 。Systrace 将 收集 数据 ,并 保存 
到 文件 trace. html。 

用 浏览 器 打开 文件 trace. html, 将 看 到 如 图 10.18 的 页 面 。 
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图 10.18 trace. html 页 面 


在 这 个 窗口 的 右上 角 有 一 个 浮动 导航 条 ,用 于 缩放 和 ”国有 
平移 ,如 图 10. 19 所 示 。 

也 可 以 用 快捷 键 W、A、S.D 进行 缩放 和 平移 。 

首先 注意 到 最 上 端的 警报 ,如 图 10. 20 所 示 。 

这 里 的 警报 行 突出 显示 在 跟踪 过 程 中 可 能 出 现 的 问 
题 ; 如 果 单 击 一 个 , 则 在 浏览 器 底部 打开 一 个 详细 面板 ,可 10.19 用 于 缩放 和 平移 


(£| e * 1 


以 读 取 警报 细节 ,如 图 10. 21 所 示 。 浮动 导航 条 
Android System Trace 
ea n b: m m = 
Alerts | wD © О О OUNEN О 


图 10.20 最 上 端的 警报 
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1 йет selected: | Alert (1) 
Alert 


Inflation during ListView recycling 

Time spent 7.808 ms 

ListView items inflated 1 

obtainView took 7.33ms 

setupListitem took 0.48ms 

Frame 

Description ListView item recycling involved inflating views. Ensure 
your Adapter#getView() recycles the incoming View, 
instead of constructing a new one. 


图 10.21 浏览 器 底部 的 详细 面板 


我 们 注意 到 示例 App 的 ListView 实现 存在 多 个 问题 。 警 报 会 提供 有 关 性 能 改进 的 详 
细 信 息 以 及 帮助 解决 问题 的 文档 链接 。 接 着 通常 有 一 个 带 有 包 名 称 的 标题 。 如 果 没 有 , 那 
么 在 其 他 包 名 称 的 右边 使 用 箭头 来 展开 相应 的 部 分 ,直到 包 名 可 见 。 

如 果 是 第 一 次 使 用 Systrace, 或 许 会 注意 到 帧 行 ,如 图 10. 22 所 示 。 


rames | oana © О COTTE OC О О 
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图 10.22 Wi 


在 浏览 器 窗口 的 底部 ,你 将 会 找到 非 绿 色 警 报 的 解释 。 特 别 是 ,查找 这 种 的 警报 , 它 表 
明示 例 App 已 经 超时 16 毫秒 还 没有 产生 帧 。 警 报 也 指出 了 其 他 问题 ,例如 , 非 回收 view 
或 错误 的 费时 的 布局 。 单 击 红色 警报 查看 更 多 性 能 问题 。 

Systrace 是 查找 性 能 问题 的 主要 工具 .但 是 , 仅 用 手工 的 方式 使 用 Systrace 是 不 够 的 ， 
还 需要 Systrace 自动 化 测试 。 


4. 使 用 Espresso 进行 自动 化 UI 测试 


1) 增加 库 依 赖 

使 用 Espresso 的 第 一 步 是 增加 库 依赖 ,打开 app/build. gradle 文件 ,在 dependencies Й 
分 ,取消 如 下 四 行 的 注释 。 

androidTestCompile "com. android. support: support — annotations: $ {supportLibVersion}" 

androidTestCompile 'com. android. support. test:runner:0.5' 

androidTestCompile 'com. android. support. test: rules:0.5' 

androidTestCompile 'com. android. support. test. espresso:espresso— core:2.2.1' 

编辑 修改 了 Gradle 脚本 后 ,Android Studio 会 在 文件 编辑 器 的 顶部 用 黄色 信息 条 提示 
是 否 同步 Gradle。 单 击 Sync Now 菜单 项 ,等 待 项 目 构建 和 配置 完成 。 

2) 编写 Espresso 测试 代码 
展开 app/src/androidTest/java/.4J JF SimpleListActivityTest. java 文件 。 取 消 对 Acti- 
vityTestRule 的 注释 ,如 下 面 的 代码 所 示 : 
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@Rule 
public ActivityTestRule < SimpleListActivity> mActivityRule = new ActivityTestRule <>( 
SimpleListActivity.class); 


取消 对 测试 方法 scrollFullList 的 注释 ,如 下 面 的 代码 所 示 : 


@Test 
@PerfTest 
public void scrollFullList() throws InterruptedException { 
ListView listView = (ListView) mActivityRule. getActivity().findViewById(android.R. 
id. list); 


// Get last position and offset for zero- indexed position tracking. 
int lastPosition = listView. getAdapter().getCount() - 1; 


// Espresso method of scrolling to the last item. 
// onData(anything()). atPosition(lastPosition); 


// Standard Android method of scrolling to the last position. 
listView. smoothScrollToPositionFromTop(lastPosition, 0, SCROLL TIME IN MILLIS); 


// Scrolling is performed asynchronously so we need to periodically loop and detect if 
// we're finished scrolling yet. This can be delayed by any work being done to display 
// data items in the ListView. 
while (listView.getLastVisiblePosition() != lastPosition) { 
Thread. sleep(300) ; 
) 
) 


最 后 取消 对 @PerfTest 的 注释 ,如 下 面 的 代码 所 示 : 


@PerfTest 
public class SimpleListActivityTest { 


在 不 能 解析 符号 的 代码 行 , 按 Alt+ Enter 键 , 选 择 Import class, 导 入 相应 的 库 文件 。 

3) 运行 测试 

运行 Gradle 任务 connectedCheck ,为 此 , 单 击 Android Studio 右边 的 Gradle 链接 打开 
Gradle projects 窗口 ,如 图 10. 23 所 示 。 

双击 android-perf-testing-master > android-perf-testing-master > Tasks —> verification 
下 的 connectedCheck 任务 ,等 待 任务 执行 完成 。 将 会 在 手机 上 看 到 示例 App 自动 执行 。 用 
浏览 器 打开 文件 android-perf-testing-master/app/build/reports/androidTests / connected/index. 
html. 将 会 显示 如 图 10. 24 的 测试 报告 。 

还 可 以 用 命令 行 运行 测试 ,打开 Android Studio 终端 (Terminal) 窗 口 ,在 终端 窗口 输入 
命令 : 


gradlew :app:connectedCheck 


或 许可 以 看 到 异常 OutOfMemoryException, EX 4 Mik E. ListView 的 低劣 实现 
都 会 引起 这 个 异常 。 
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Gradle projects 3*1 
G+ -|C|= =| | 


` © android-perf-testing-master 
` @ android-perf-testing-master (root) 
м Bg Tasks 
> Ba android 


CV Y Y 
3 
3 
E 


€ connectedAndroidTest 

$ connectedCheck 

€ connectedDebugAndroidTest 
© deviceAndroidTest 

4 deviceCheck 


图 10.23 Gradle projects 窗口 


1> H | р Test results - Test Summary х | + 


Test Summary 


3 1 8. 504s 66% 


tests failures duration 
successful 


Failed tests Packages Classes 


Class Test 
SimpleListActivityTest scrollFulllist 
Generated by Gradle 4.1 at 2018- 14:54 


图 10.24 测试 报告 


5. 使 用 MonkeyRunner 自动 化 Systrace 


1)MonkeyRunner 环境 配置 

修改 android-sdk\tools\bin 文件 夹 下 的 monkeyrunner. bat 文件 ,将 其 中 的 set frameworkdir= 
修改 为 set frameworkdir —.. \ lib, Е tools X ffF 3 F Hr # framework 文件 夹 ,将 \android-sdk\ 
platform-tools 文件 夹 下 的 adb. exe 复制 到 framework 文件 夹 。 这 样 就 可 以 运行 monkeyrunner fir 
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OT 
2) 执行 MonkeyRunner 脚本 
在 Windows 命令 行 输入 命令 : 


% ANDROID HOME % \platform— toolsVadb devices — 1 


将 显示 连接 设备 列表 ,如 图 10. 


Ей SEA C\Windows\system32\cmdexe а eis =a 


ers \lenovo>/ANDROI D_HOME”\platform-tools\adb devices | 
lList of devices attached 
MYU@215724018797 device product :PLK-TL@1H model:PLK. 


用 四 m , 


z — 


图 10.25 连接 设备 列表 
在 Android Studio 终端 ,输入 如 下 命令 : 


gradlew : app: assembleDebug : app: assembleDebugAndroidTest : app: installDebug 
app: installDebugAndroidTest 


命令 运行 结果 如 图 10. 26 所 示 
Terminal 
+ > Task :app:installDebugAndroidTestavaResForDebugAndroidTest 


=: Installing APK 'app-debug-androidTest.apk' on 'PLK-TLO1H - 6.0' for app:debugAndroidTest 


Installed on 1 device. 


in 24m 12s 


50 actionable tasks: 49 executed, 1 up-to-date 
图 10.26 Gradle 构建 结果 
在 Android Studio 终端 ,输入 如 下 命令 : 
monkeyrunner run_perf_tests. py .\ MYV0215724018797 


这 里 run. perf tests. py 是 Python 脚本 (有 可 能 需要 指定 绝对 路 径 ),.\ 是 日 志文 件 存放 的 
文件 夹 ,MYV0215724018797 是 Android 设备 ID。 结 果 如 图 10.27 所 示 。 

会 看 到 手机 运行 了 性 能 测试 。 

3) 为 MonkeyRunner 增加 Gradle 任务 

打开 文件 buildSrc/ src/ main/ groovy/ com/ google/ android/ perftesting/RunLocalPerfTestsTask 。 
取消 对 任务 实现 代码 的 注释 。 

阅读 文件 buildSrc/src/main/groovy/com/google/android/perftesting/PerfTestTaskG 
eneratorPlugin。 这 是 一 个 定制 Gradle 插件 . 它 负 责 查 询 连 接 的 Android 设备 ,为 每 个 设备 
设置 Gradle 任务 RunLocalPerfTestsTask。 这 个 定制 Gradle 插件 也 产生 一 个 通用 Gradle 


IE: Works paces \andro idStudioPro jects \android-perf—test ing-master>monkeyrunner E:Worksp| 
riting logs to: .\ 

Using device id: MYU0215724018797 

Your ANDROID_HOME set to: E:\Android\android-sdk 


Cleaning data files 
Maiting for a device to be connected. 


Device connected. 

Starting dump permission grant 

Starting storage permission grant 
gfxinfo on device 


:58.094:S [TestThread] [con.android.chinpchat.adb.fidbChinpDevic 

perftesting-TestListener con.google.android.perftesting.test/android.support.test 
[TestThread] [con.android.chimpchat.adb.RdbChinpDevice Icom. androil 
ITestThread] [com.android.chimpchat .adb.AdbChimpDevice] at con. 
LIestIhread] [com.android.chinpchat.adb.üdbChimpDevicel аб соп. 


图 10.27 MonkerRunner 运行 结果 


任务 RunLocalPerfTests 
打开 app/build. gradle, 取 消 最 后 一 行 的 注 


E 

apply plugin: PerfTestTaskGeneratorPlugin 

在 第 1 行 增 加 如 下 代码 : 

import com. google. android. perftesting. PerfTestTaskGeneratorPlugin 
在 文件 编辑 器 的 顶部 用 黄色 信 


地 项 目 构建 和 配置 完成 。 你 将 会 ; 
10.2 


项 ,等 


] 步 Gradle。 单 击 Sync Now 
到 在 Gradle projects 中 增加 了 新 的 Gralde 任务 ,如 


条 提示 是 否 


所 示 


Gradle projects 3-1 
th Re 
2 validatesigningUebugAndroid Test 


@ writeDebugApplicationid 
4 writeReleaseApplicationld 
v Вр verification 
Qt check 
Qt connectedAndroidTest 
@ connectedCheck 
48 connectedDebugAndroidTest 
Qt deviceAndroidTest 
40 deviceCheck 
$t lint 
© lintDebug 
© lintRelease 
© lintVitalRelease 
$ runCloudRoboTests 
Qt runLocalPerfTests 
@ test 
Ü testDebugUnitTest 
Ü testReleaseUnitTest 
> BG Run Configurations 
S buildSrc 


图 10.28 Gradle project 中 增加 了 新 的 Gralde 任务 
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双击 Gradle 任务 runLocalPerfTests, 耐心 等 待 构建 ,安装 和 运行 示例 App. № 50 
MonkeyRunner。 你 将 会 注意 到 手机 上 运行 了 性 能 测试 。 


6. 收集 更 多 数据 


打开 文件 夹 app/src/androidTests 下 的 文件 SimpleListActivityTest. java。 取 消 对 @Rule 
注解 的 以 Enable 开头 的 类 成 员 变量 的 注释 。 如 下 面 的 代码 所 示 。 


@Rule 
public EnableTestTracing mEnableTestTracing = new EnableTestTracing(); 


@Rule 
public EnablePostTestDumpsys mEnablePostTestDumpsys = new EnablePostTestDumpsys( ) ; 


@Rule 
public EnableLogcatDump mEnableLogcatDump = new EnableLogcatDump(); 


GRule 
public EnableNetStatsDump mEnableNetStatsDump - new EnableNetStatsDump(); 


导入 相应 的 类 。 

取消 对 下 面 的 代码 的 注释 

@Rule 

public Timeout globalTimeout = new Timeout( 


SCROLL TIME IN MILLIS + MAX ADAPTER VIEN PROCESSING TIME IN MILLIS, TimeUnit. 
MILLISECONDS); 


打开 TestListener. java, 取 消 对 下 面 的 代码 的 注释 : 


@override 

public void testRunStarted(Description description) throws Exception { 
Log. w(LOG_TAG, "Test run started."); 
// Cleanup data from past test runs. 
deleteExistingTestFilesInAppData(); 
deleteExistingTestFilesInExternalData(); 


@override 

public void testRunFinished(Result result) throws Exception { 
Log.w(LOG TAG, "Test run finished."); 

重新 运行 测试 。 

7. 解决 性 能 问题 


运行 性 能 测试 时 已 经 发 现 了 一 些 性 能 问题 ,可 以 用 收集 的 信息 解决 这 些 性 能 问题 。 我 
们 观察 到 如 下 错误 信息 : 


1) scro11Fu11List(com. google. android. perftesting. SimpleListActivityTest) 
Script: org. junit. runners. model. TestTimedOutException: test timed out after 2500 milliseconds 
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Script: at java. lang. Thread. sleep(Native Method) 

Script: at java. lang. Thread. sleep(Thread. java:1031) 

Script: at java. lang. Thread. sleep(Thread. java:985) 

Script: at com. google. android. perftesting. SimpleListActivityTest. scrollFullList 
(SimpleListActivityTest. java:101) 


Script: at java. lang. reflect. Method. invoke( Native Method) 

Script: at org. junit. runners. model. FrameworkMethod $ 1. runReflectiveCall ( FrameworkMethod. 
java:50) 

Script: at org. junit. internal. runners. model. ReflectiveCallable. run(ReflectiveCallable. java: 
12) 

Script: at org. junit. runners. model. FrameworkMethod. invokeExplosively(FrameworkMethod. java: 
47) 

Script: at org. junit. internal. runners. statements. InvokeMethod. evaluate ( InvokeMethod. java: 
17) 


Script: at org. junit. internal. runners. statements. FailOnTimeout $ CallableStatement. call 
(FailOnTimeout. java:298) 

Script: at org. junit. internal. runners. statements. FailOnTimeout $ CallableStatement. call 
(FailOnTimeout. java:292) 

Script: at java. util. concurrent. FutureTask. run(FutureTask. java:237) 

Script: at java. lang. Thread. run(Thread. java:818) 


这 个 错误 信息 也 记录 在 文件 test. failure. log 中 。 打 开 文 件 gfxinfo. dumpsys. log ,将 看 
到 一 行 信息 ,表明 存在 严重 的 卡 顿 (例如 ,大 约 是 92%)。 


** Graphics info for pid 31367 [com. google. android. perftesting] ** 


Stats since: 19840518836088ns 
Total frames rendered: 323 
Janky frames: 296 (91.64%) 
90th percentile: 117ms 

95th percentile: 125ms 

99th percentile: 133ms 

Number Missed Vsync: 290 
Number High input latency: 0 
Number Slow UI thread: 295 
Number Slow bitmap uploads: 286 
Number Slow issue draw commands: 15 


打开 Systrace, 观 察 表 明 性 能 问题 的 警告 数量 。Systrace 警告 清楚 地 表明 List View 
recycling view 问题 以 及 getView() 所 花费 的 时 间 太 长 。 为 了 解决 这 个 问题 ,打开 com. 
google. android. perftesting. contacts. ContactsArrayAdapter 类 文件 ,优化 代码 。 修 改 如 下 
的 代码 : 

LayoutInflater inflater = LayoutInflater. from(getContext()); 

// This line is wrong, we're inflating a new view always instead of only if it's null. 


// For demonstration purposes, we will leave this here to show the resulting jank. 
convertView = inflater. inflate(R. layout. item contact, parent, false); 


优化 后 的 代码 应 当 为 : 
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if (convertView == null) { 
LayoutInflater inflater = LayoutInflater.from(getContext()); 
convertView - inflater.inflate(R.layout. item contact, parent, false); 


) 


重新 运行 测试 ,在 浏览 器 中 刷新 trace. html。 可 以 注意 到 getView() 仍 然 导致 性 能 问题 。 
分 析 getView() 中 的 Bitmap 代码 ,可 以 发 现 应 当 用 缓存 装载 Btmap。 修 改 如 下 的 代码 ， 

// Let's just create another bitmap when we need one. This makes no attempts to re-use 

// bitmaps that were previously used in rendering past list view elements, causing a large 

// amount of memory to be consumed as you scroll farther down the list. 


Bitmap bm = BitmapFactory.decodeResource(convertView.getResources(), R.drawable.bbq); 
contactImage. setImageBitmap(bm); 


优化 后 的 代码 应 当 为 : 


Glide. with(contactImage. getContext()) 
. load(R. drawable. bbq) 
.fitCenter() 

. into(contactImage); 


重新 运行 测试 ,在 浏览 器 中 刷新 trace. html, 
10.3.5 App 测试 示例 


网 址 https: //github. com/googlesamples/android-testing 中 包含 了 一 组 测试 示例 , 展 
示 了 Android App 自动 化 测试 的 各 种 框架 和 技术 的 应 用 。 


1. 测试 示例 


1) Espresso 测试 示例 

(1) BasicSample; 基本 的 Espresso 测试 示例 。 

(2) CustomMatcherSample: 扩展 Espresso, 匹 配 EditText 的 hint 属性 的 测试 示例 。 
(3) DataAdapterSample: DataAdapter 测试 示例 。 

(4) IdlingResourceSample: 与 后 台 任 务 同步 的 测试 示例 。 

(5) IntentsBasicSample: intended() 和 intending() 基 本 用 法 示例 。 

(6) IntentsAdvancedSample: 模拟 用 户 使 用 相机 拍照 的 测试 示例 。 

(7) MultiWindowSample: Espresso 处 理 不 同窗 口 的 示例 。 

(8) RecyclerViewSample: RecyclerView 的 Espresso 测试 示例 。 

(9) WebBasicSample: 使 用 Espresso-web 与 WebView 交互 的 测试 示例 。 
(10) BasicSampleBundled: 使 用 Eclipse 和 其 他 IDE 的 测试 示例 。 

(11) MultiProcessSample: 使 用 multiprocess Espresso 的 示例 。 

2) UI Automator 测试 示例 

BasicSample: 基本 的 UI Automator 测试 示例 。 

3) AndroidJUnitRunner 测试 示例 

AndroidJunitRunnerSample: 测试 注解 .参数 化 测试 和 创建 测试 套件 的 示例 。 
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4) JUnit4 Rule 测试 示例 
(1) BasicSample: ActivityTestRule 简单 用 法 示例 。 
(2) IntentsBasicSample: IntentsTestRule 简单 用 法 示例 。 
(3) ServiceTestRuleSample: ServiceTestRule 简单 用 法 示例 。 


2. 测试 准备 


测试 示例 需要 的 软件 版 本 如 下 : 

* Android SDK v23, 

* Android Build Tools v23, 

e Android Support Repository rev17, 


3. 用 示例 学 习 Android App 测试 


这 些 测 试 示例 使 用 了 Gradle 构建 工具 , 运行 gradlew. bat 将 自动 下 载 Gradle。 为 了 构 
建 某 个 测试 项 目 ,在 测试 项 目的 目录 中 输入 命令 gradlew assemble 或 者 在 Android Studio 
中 导入 项 目 , 在 Android Studio 中 构建 。 

使 用 命令 gradlew connectedAndroidTest 在 连接 的 模拟 器 或 真 机 上 运行 测试 。 

使 用 命令 gradlew test 在 开发 机 的 JVM 环境 运行 测试 。 

或 者 在 Android Studio 中 运行 测试 。 


10.4 知识 拓展 : Appium 介绍 


本 节 介 绍 App 测试 工具 一 一 Appium。 在 当今 的 软件 行业 中 ,一 个 应 用 常常 需要 提供 
多 个 终端 ,以 满足 广泛 的 客户 需求 。 掌 握 了 Appium ah eee App 测试 , 既 
能 测试 Android App 又 能 测试 IOS App, 取 得 事半功倍 的 效果 。 


10.4.1 Appium 简介 


Appium 是 一 个 开源 的 测试 自动 化 框架 ,用 于 测试 原生 应 用 、 移 动 Web 应 用 和 混合 型 
应 用 , 它 是 跨 平台 的 , 即 这 些 应 用 的 平台 是 iOS FHL. Android 手机 和 Windows 桌面 。 原 生 
应 用 是 指 用 iOS, Android 或 Windows SDK 编写 的 应 用 ,移动 Web 应 用 是 指使 用 移动 浏览 
器 访问 的 Web 应 用 (Appium 支持 iOS 上 的 Safari, Chrome 或 者 Android 的 内 置 浏览 器 ) 。 
混合 应 用 是 指 原生 应 用 与 移动 Web 应 用 的 结合 ,通常 通过 一 个 原生 应 用 内 骨 浏 览 器 实现 两 
者 的 结合 。 

重要 的 是 ,Appium 是 跨 平台 的 ,我 们 可 以 使 用 相同 的 API 为 多 种 不 同 的 平台 (iOS、 
Android 和 Windows) 上 的 应 用 编写 测试 用 例 。 

移动 应 用 自动 化 测试 应 当 遵 循 如 下 原则 : 

。 不 需要 重 编译 应 用 或 修改 应 用 就 可 以 对 移动 应 用 进行 自动 化 测试 。 

。 编写 和 运行 测试 用 例 不 应 当 限 定 特定 的 语言 和 框架 。 

。 一 个 移动 应 用 测试 自动 化 框架 不 需要 ”重复 造 轮子 ”, 意 指 API 应 当 是 通用 的 。 
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。 一 个 移动 应 用 测试 自动 化 框架 应 当 是 开源 的 。 

为 了 遵循 上 面 的 原则 ,Appium 的 解决 方法 分 别 如 下 : 

第 一 条 ,采用 底层 驱动 商 提供 的 自动 化 框架 ,这 样 就 不 需要 在 移动 应 用 中 包含 Appium 
或 者 第 三 方 代码 或 框架 重新 编译 应 用 了 ,这 表明 被 测 的 应 用 与 发 布 的 应 用 完全 相同 。 
Appium 使 用 的 供应 商 框架 如 下 : 

* 105 9.3 以 上 一 一 僵 果 的 XCUITest。 
* IOS 9. 3 以 下 一 一 僵 果 的 UIAutomation, 
Android 4.2 十 一 一 Google 的 UiAutomator/ UiAutomator2。 
Android 2. 3 十 一 一 Google 的 Instrumentation(Selendroid 项 目 提 供 Instrumentation 支持 ) 。 

* Windows Microsoft 的 WinAppDriver. 

第 二 条 ,将 底层 驱动 商 提供 的 框架 包装 在 一 套 API-WebDriver API f, 

WebDriver( 也 称 Selenium WebDriver) 其实 是 一 个 C/S 架构 的 协议 (JSON Wire 
Protocol) 。 通 过 这 个 协议 ,用 任何 语言 编写 的 客户 端 都 可 以 发 送 НТТР 请 求 给 服务 器 , 现 
已 有 用 常见 的 编程 语言 编写 的 客户 端 。 这 就 意味 着 用 户 可 以 自由 选择 想 要 使 用 的 测试 框架 
和 执行 器 ,也 可 以 将 任何 包含 HTTP 客户 端的 库 文 件 加 入 到 用 户 的 代码 中 。 换 句 话 说 ， 
Appium 的 WebDriver 不 是 一 个 技术 上 的 测试 框架 ,而 是 一 个 自动 化 库 。 

第 三 条 ,因为 WebDriver 已 经 是 Web 应 用 自动 化 测试 的 事实 标准 ,并 且 是 正在 起 草 的 
W3C 标准 。 移 动 Web 应 用 的 自动 化 测试 不 需要 另起炉灶 ,只 需要 在 WebDriver 的 基础 上 ， 
扩展 一 些 适合 移动 端 自动 化 测试 的 API。 

第 四 条 ,Appium 是 开源 的 。 

可 以 通过 以 下 Appium 概念 来 认识 Appium, 


1. C/S 架构 


Appium 的 核心 是 一 个 提供 REST API 支 持 的 Web 服务 器 。 它 接受 客户 端的 连接 , 侦 
听 客 户 端的 命令 ,在 手机 设备 上 执行 这 些 命令 ,然后 通过 HTTP 的 响应 展现 命令 执行 的 结 
果 。 这 种 架构 给 我 们 提供 了 很 好 的 开放 特性 : 任何 语言 只 要 有 HTTP 客户 端的 API, 就 可 
以 使 用 这 个 语言 编写 测试 代码 。 然 而 ,使 用 Appium 客户 端 库 编写 测试 代码 将 更 容易 。 我 
们 还 可 以 将 服务 器 放 在 与 测试 不 同 的 计算 机 上 ,我 们 可 以 借助 Sauce Labs 这 样 的 云 服 务 ， 
编写 测试 代码 ,接受 命令 以 及 解析 命令 。 


2. Session 


自动 化 的 过 程 通常 在 session 上 下 文中 执行 。 客 户 端 初始 化 一 个 与 服务 器 的 session 会 
话 ,虽然 不 同 的 语言 初始 化 的 方式 不 同 ,但 是 它们 都 要 发 送 POSTVsession 请 求 到 服务 器 
端 ,这 些 请 求 中 都 会 带 有 一 个 JSON 对 象 desired capabilities。 这 时 服务 器 端 会 启动 自 
动 化 session ,然后 返回 一 个 session ID, 以 后 的 命令 都 会 用 这 个 session ID 去 匹配 。 


3. Desired Capabilities 


desired capabilities 这 个 对 象 其 实 是 一 个 键 值 对 (key-value) 的 集合 ,这 些 键 值 对 被 发 送 
到 服务 器 端 后 ,服务 器 解析 这 些 键 值 对 就 知道 了 客户 端 对 哪 种 自动 化 session 感 兴趣 ,然后 
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就 会 启动 相应 的 session。 不 同 的 键 值 对 决定 了 服务 器 端 在 自动 化 测试 中 的 要 完成 的 任务 。 
例如 ,platformName 的 值 为 iOS 就 是 告诉 服务 器 启动 一 个 iOS 的 session, ,而 不 是 Android 
或 Windows session。 如 果 safariAllowPopups fi] ffi Jy true, 就 是 告诉 服务 器 ,对 于 Safari A 
动 化 session, 可 以 使 用 JavaScript 打开 新 窗口 。 这 些 键 值 对 的 具体 含义 请 看 官方 文档 。 


4. Appium Server 
Appium Server 是 一 个 使 用 Node. js 编写 的 服务 器 。 
5. Appium Clients 


A VF ЖЕНИ pi 09 2€ Г! Эй Е (Java, Ruby, Python, PHP, JavaScript 和 C#), 它 们 支持 
Appium 对 WebDriver 协议 的 扩展 。 当 使 用 Appium 时 ,将 使 用 这 些 客 户 端 库 代替 
WebDriver 客户 端 。Appium Server 支持 的 客户 端 库 如 表 10. 2 所 示 。 


表 10.2 Appium Server 支持 的 客户 端 库 


W 言 库 地 址 
Ruby https: / /github. com/appium/ruby lib 
Python https: / /github. com/appium/python-client 
Java https: //github. com/appium/java-client 
JavaScript( Node. js) https: / /github. com/admc/wd 
Objective C https; //github. com/appium/selenium-objective-c 
PHP. https: //github. com/appium/php-client 
C£ ( NET) https; //github. com/appium/appium-dotnet-driver 


6. Appium Desktop 
在 不 同 的 操作 系统 下 .有 不 同 的 Appium Desktop。 它 们 包含 了 运行 Appium Server 所 
需要 的 全 部 内 容 。Appium Desktop 还 附带 Inspector. fi HH Inspector 可 以 检查 应 用 的 层次 。 


10.4.2 Appium 起 步 
1. Appium 测试 环境 搭建 


1) Appium 的 安装 
有 两 种 安装 Appium 的 方法 ,使 用 NPM 安装 和 下 载 Appium Desktop 安装 。 使 用 
NPM 安装 前 需要 安装 Node。 安 装 命令 如 下 : 


npm install 一 g appium 

或 
npm —- registry http://registry. cnpmjs. org install - g appium 
FÆ Appium Desktop 很 简单 ,地 址 是 : 


https://github. com/appium/appium— desktop/releases 
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2) Appium Driver 

若 要 进行 特定 平台 的 自动 化 测试 ,需要 使 用 Appium Driver, 2/6 Appium Driver 的 安 
装 要 求 与 特定 平台 的 应 用 开发 要 求 类 似 ,例如 ,使 用 Appium. Android Driver 进行 Android 
应 用 的 测试 自动 化 ,需要 安装 Android SDK。 

Appium Driver 列表 如 下 : 

* XCUITest Driver HF iOS 应 用 测试 )。 

* UiAutomator2 Driver( 用 于 Android 应 用 测试 ) 。 

。 Windows Driver( 用 于 Windows 桌面 应 用 测试 ) 。 

。 Mac Driver( 用 于 Mac 桌面 应 用 测试 ) 。 

* (BETA) Espresso Driver( 用 于 Android 应 用 测试 ) 。 

3) 验证 安装 

可 以 使 用 appium-doctor 验证 Appium 的 安装 ,首先 用 命 今 : 


npm install - g appium - doctor 


安装 appium-doctor, 然 后 ,运行 appium-doctor 命令 时 指定 -ios 或 者 -android 分 别 验证 iOS 
或 Android 的 Appium 环境 安装 成 功 。 

4) Appium 客户 端 库 

Appium 只 是 一 个 HTTP 服务 器 ,需要 和 客户 端 库 联合 使 用 才能 用 于 自动 化 测试 。 
Appium 和 Selenium 使 用 了 相同 的 协议 一 一 WebDriver。Appium 和 标准 的 Selenium 客户 端 库 
可 以 联合 使 用 ,Appium 还 有 自己 的 客户 端 库 。Appium 客户 端 库 扩展 了 Selenium 客户 端 库 。 

可 以 在 网 址 http://appium. io/docs/en/about-appium/appium-clients/index. html 下 
载 Appium 客户 端 库 。 

5) 启动 Appium 

如 果 是 使 用 NPM 安装 了 Appium, 就 使 用 命令 : 

appium 
启动 Appium。 如 果 是 安装 了 Appium Desktop, 就 单 击 “ 启 动 ” 按 钮 。 

下 面 以 Windows 7 64 位 环境 安装 Appium Desktop 为 例 介绍 。Appium Desktop 启动 
后 的 界面 如 图 10. 29 所 示 。 

Appium 启动 后 将 显示 Appium 版 本 和 端口 (默认 端口 是 4723)。 这 个 端口 是 重要 的 ， 
测试 客户 端 就 是 通过 这 个 端口 与 Appium 建立 连接 。 


2. 用 Appium 进行 Android App 测试 


以 下 以 一 个 基本 的 Android App 测试 为 例 ,开始 Appium 测试 。 我 们 将 使 用 UiAutomator2 
和 Javascript 完成 Appium 测试 。 

1) 准备 

安装 Android 8.0 模拟 器 并 运行 。 在 网 址 https://github. com/appium/sample-code/ 
blob/master/sample-code/apps/ ApiDemos/bin/ ApiDemos-debug. apk 下 载 被 测 App。 

2) 设置 客户 端 库 

以 Webdriver. io 客户 端 为 例 ,设置 Appium 客户 端 库 。 新 建 一 个 文件 夹 ,例如 ,AppiumClient。 
在 这 个 文件 夹 下 执行 命令 : 
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N 


А 1 
y Appium [ETT] 


» Checking if an update is available 

> Launching Appium server with command: C:\Program Files (x86)\Appium\node.exe lib\server 
\mainjs 一 address 127.0.0.1 --port 4723 --platform-name Android --platform-version 23 一 
automation-name Appium ~ 

> Update not available 

> info: Welcome to Appium v1.4.16 (REV ae6877eff263066b26328d457bd285c0cc62430d) 

> info: Appium REST http interface listener started on 127.0.0.1:4723 

> info: [debug] Non-default server args: 


图 10.29 Appium Desktop 启动 后 的 界面 


npm install webdriverio 


3) 会 话 初 始 化 
创建 一 个 测试 文件 apptest. js, 加 入 一 行 代码 初始 化 客户 站 


// javascript 

const wdio = require( 'webdriverio'); 

还 要 启动 Appium 会 话 ,为 此 ,需要 定义 一 组 服务 器 选项 和 Desired Capabilitity, 然 后 调 
用 wdio. remoteO 。 一 般 需 要 如 下 的 Desired Capabilitity 

* platformName: 平台 名 称 

* platformVersion: 平台 版 本 

。 deviceName: 设备 名 称 。 

* app: 被 测 App 的 路 径 (或 者 用 browserName 指定 被 测 Web 应 用 使 用 的 浏览 器 ) 。 

* automationName: 驱动 名 称 。 

现在 测试 文件 apptest. js 如 下 : 


// javascript 
const opts = { 
port: 4723, 
desiredCapabilities: { 
platformName: "Android", 
platformVersion: "8.0", 
deviceName: "Android Emulator", 
app: "/path/to/the/downloaded/ApiDemos. apk", 
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automationName: "UiAutomator2" 
} 
h 


const client - wdio.remote(opts); 


4) 执行 测试 命令 
在 测试 文件 apptest. js 中 增加 一 些 代码 ,启动 会 话 ,执行 一 些 测试 命令 ,结束 会 话 。 现 
在 测试 文件 apptest. js 如 下 : 


// javascript 
const wdio = require( 'webdriverio') ; 


const opts = { 
port: 4723, 
desiredCapabilities: { 
platformName: "Android", 
platformVersion: "8.0", 
deviceName: "Android Emulator", 
app: "/path/to/the/downloaded/ApiDemos. apk", 
automationName: "UiAutomator2" 
} 
}; 
const client = wdio. remote(opts) ; 
client 
.init() 
.click("— App") 
.click("~Alert Dialogs") 
.back() 
.back() 
.end(); 
在 以 上 的 测试 文件 中 ,我 们 告诉 Appium 按照 App 的 层次 查找 元 素 并 单 击 元 素 ， 
webdriverio 约定 用 一 前 绥 表 示 按 可 访问 的 id 查找 元 素 。 
可 以 使 用 Node 运行 这 个 测试 文件 。 如 果 测 试 环境 和 测试 代码 没有 问题 ,那么 将 看 到 
信息 ,App 也 将 启动 并 模拟 人 工 操作 。 


Appium 显示 日 志 
实 训 任 务 


任务 1: 在 10.3.5 节 中 选择 一 个 Espresso 测试 示例 ,分析 构建 .执行 这 个 测试 示例 。 

任务 2: 在 10.3.5 节 中 选择 UI Automator 测试 示例 BasicSample, 分 析 、 构 建 、 执 行 这 
个 测试 示例 。 

任务 3: 在 10. 3. 5 节 中 选择 AndroidJUnitRunner 测试 示例 AndroidJunitRunnerSample, 分 
Tr 构建、 执行 这 个 测试 示例 。 

任务 4: 按照 10. 3.4 节 的 步骤 ,完成 示例 项 目的 性 能 测试 。 
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本 章 主 要 内 容 

Web 前 端 测试 简介 

Web 前 端 测试 工具 

Jasmine 测试 演练 

知识 拓展 : Jubula 介绍 

近年 来 ,前 端 开 发 成 为 软件 行业 的 热门 话题 ,前 端 测试 也 应 运 而 生 。 尽 管 软件 测试 的 基 
本 理论 方法 .原则 仍然 适用 于 前 端 测试 ,但 是 ,前 端 开 发 有 自己 的 特点 。 因 此 ,我 们 仍然 需 
要 更 有 针对 性 的 测试 方法 ,使 得 前 端 测试 更 有 效 。 


(11.1 什么 是 Web 前 端 测试 
本 节 首 先 介 绍 Web 前 端 测试 的 概念 ,然后 介绍 常见 的 Web 前 端 测 试 工具 。 


11.1.1 Web 前 端 测试 简介 


随 着 软件 技术 的 发 展 ,分 层 的 思想 被 软件 行业 广 为 接 受 。 典 型 的 MVC(Model-View- 
Controller) 设 计 模 式 就 是 这 种 分 层 思 想 的 体现 。MVC 把 应 用 程序 分 成 三 个 既 相对 独立 又 
相互 联系 的 部 分 ,模型 层 负责 管理 应 用 的 数据 .逻辑 和 业务 规则 ; 视图 层 负责 信息 的 展现 ， 
是 与 终端 用 户 交 互 的 软件 层 ; 控制 层 负责 在 模型 层 和 视图 层 之 间 传 递 数据 或 操作 。MVC 
设计 模式 的 优点 之 一 是 当 改变 视图 层 时 ,可 以 不 需要 改变 模型 层 ,使 得 软件 更 容易 维护 。 不 
同 的 编程 语言 有 自己 的 MVC 实现 ,我 们 把 MVC 实现 称 为 MVC 框架 。 例 如 ,Java 中 的 
Spring MVC 框架 、. NET 中 的 ASP. NET MVC #£42 JavaScript 中 的 Ember. js MVC 框架 
等 。 我 们 可 以 把 模型 层 称 为 后 端 ,把 视图 层 成 为 前 端 。 

不 管 是 桌面 应 用 程序 ,还 是 C/S 或 B/S 应 用 程序 ,都 可 以 用 MVC 设计 模式 。 我 们 把 
对 视图 层 的 测试 称 为 前 端 测 试 。 前 端 测试 的 范围 很 广 , 限 于 篇 幅 , 本 章 不 可 能 面面俱到 ,这 
里 重点 介绍 Web 应 用 的 前 端 测试 ,在 11. 4 节 , 我 们 将 对 通用 的 前 端 测试 工具 Jubula 做 一 
个 简单 介绍 。 

Web 应 用 前 端的 实现 技术 有 很 多 ,国内 流行 的 Web 应 用 前 端 实现 技术 是 JavaScript, 
而 JavaScript 框架 、 库 或 工具 的 数量 也 是 非常 多 的 。 下 面 列 出 九 款 JavaScript 框架 或 库 。 
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1. jOuery 


jQuery 是 一 个 轻 量 级 的 ,快速 的 、 功 能 丰富 的 JavaScript 库 。 它 通过 可 以 跨 多 个 浏览 器 
工作 的 易于 使 用 的 API 使 得 HTML 文档 遍历 和 操作 、 事 件 处 理 、 动 画 和 Ajax 等 变 得 更 为 
简单 。 由 于 通用 性 和 可 扩展 性 的 结合 ,jQuery 已 经 改变 了 数 百 万 人 编写 JavaScript 的 方式 。 

详 见 官网 https://jquery. com/。 


2. Bootstrap 


Bootstrap 是 一 个 很 受 欢 迎 的 开源 的 前 端 开发 组 件 库 ,使 得 我 们 可 以 使 用 HTML、CSS 
和 JS 开 发 响应 式 、 移 动 设 备 优先 的 Web 应 用 。 
详 见 官网 https://getbootstrap. com/。 


3. ExtJS 


ExtJS 是 一 个 完整 的 JavaScript 框架 , 它 有 强大 的 UI 组件 库 , 使 得 开发 人 员 可 以 快速 
构建 有 大 量 数据 处 理 的 企业 级 Web 应 用 或 移动 应 用 。 
详 见 官网 https://www. sencha. com/。 


4. Node.js 


Node. js 是 在 Chrome 的 V8 JavaScript 引擎 上 构建 的 JavaScript 运行 时 。Node.js 使 
用 了 事件 驱动 的 非 阻 塞 MO 模型 ,使 其 是 轻 量 级 的 和 高 效 的 。Node. js 包含 的 包 管 理工 具 
NPM 使 得 开发 人 员 可 以 从 NPM 网 站 (https://www. npmjs. com/) 获 得 JavaScript 库 。 
NPM 网 站 是 世界 上 最 大 的 开源 JavaScript 库 网 站 。 

详 见 官网 https://nodejs. org. 


5. Angular JS 


Angular JS 诞生 于 2009 年 ,由 Misko Hevery 等 人 创建 ,后 为 Google 收购 ,是 一 款 优秀 
的 前 端 JS 框架 ,已 经 被 用 于 Google 的 多 款 产品 中 。Angular JS 有 着 诸多 特性 ,最 为 核心 的 
是 MVW(Model-View-Whatever)、 模 块 化 .自动 化 双向 数据 绑 定 .语义 化 标签 .依赖 注入 、 
可 测试 性 等 。Angular JS А 2.0 版 本 后 简称 为 Angular。Angular 结合 了 声明 式 模 板 ,依赖 
注入 、 端 到 端 工具 和 集成 的 最 佳 实践 ,可 用 于 开发 跨 平 台 的 应 用 (Web 应 用 ,移动 应 用 和 桌 
面 应 用 )。 

详 见 官网 https://angularjs. org/。 


6. Vue 


Vue 是 一 套用 于 构建 用 户 界面 的 渐进 式 框架 。 与 其 他 大 型 框架 不 同 的 是 ,Vue 被 设计 
为 可 以 自 底 向 上 逐 层 应 用 。Vue 的 核心 库 只 关注 视图 层 , 不 仅 易 于 上 手 , 还 便于 与 第 三 方 
库 或 既 有 项 目 整合 。 男 一 方面 , 当 与 现代 化 的 工具 链 以 及 各 种 支持 类 库 结合 使 用 时 ,Vue 
也 完全 能 够 为 复杂 的 单 页 应 用 提供 驱动 。 

详 见 官网 https://vuejs. org/。 
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7. Ember 


Ember 是 一 个 用 于 创建 Web 应 用 的 JavaScript MVC 框架 , 旨 在 帮助 你 构建 具有 丰富 
和 复杂 的 用 户 交 互 的 网 站 。 它 为 开发 人 员 提 供 了 许多 在 现代 Web 应 用 中 管理 复杂 性 所 必 
需 的 特性 ,以 及 能 够 支持 快速 迭代 的 集成 开发 工具 包 。 

Ember 采用 基于 字符 串 的 Handlebars 模板 ,支持 双向 绑 定 、 观 察 者 模式 .计算 属性 ( 依 
赖 其 他 属性 动态 变化 ) 自动 更 新 模板 .路 由 控制 .状态 机 等 。Ember 使 用 自身 扩展 的 类 来 创 
f£ Ember 对 象 . 数 组 .字符 串 .函数 ,提供 大 量 方法 与 属性 用 于 操作 。 

详 见 官网 https://www. emberjs. com/。 


8. Backbone 


Backbone 是 一 个 轻 量 级 的 前 端 MVC 框架 ,用 于 结构 化 管理 页 面 中 的 大 量 JS, 建 立 与 
服务 器 、 视 图 间 的 无 颖 连接 ,为 构建 复杂 的 应 用 提供 基础 框架 。 

Backbone 正如 它 的 英文 含义 “骨干 所 表明 的 ,我们 不 能 独立 使 用 Backbone. 因为 它 的 
基础 函数 .DOM 操作 、AJAX 都 依赖 于 第 三 方 库 。Backbone 依赖 的 库 有 Underscore( 基 础 
函数 库 , 必 选 ) jQuery/Zepto( 支 持 DOM 操作 、AJAX 的 库 可 选 )。 

详 见 官网 http://backbonejs. org, 


9. React 


React 是 Facebook 开发 的 一 款 声明 式 的 、 高 效 的 ,灵活 的 JavaScript 库 , 用 于 构建 用 户 
界面 。 首 先 ,React 不 是 一 个 MVC 框架 , 它 是 构建 易于 可 重复 调用 的 Web 组 件 , 侧 重 于 
UI, 也 就 是 View 层 。 其 次 ,React 是 单 向 的 从 数据 到 视图 的 浑 染 , 非 双向 数据 绑 定 。 此 外 ， 
React 不 直接 操作 DOM 对 象 ,而 是 通过 虚拟 DOM 用 diff 算法 以 最 小 的 步骤 作用 到 真实 的 
DOM FL. 

详 见 官网 https://reactjs. org/. 

JavaScript 框架 或 库 数 不 胜 数 ,但 是 ,我 们 注意 到 软件 的 可 测试 性 在 JavaScript 框架 或 
库 中 有 了 体现 。 例 如 jQuery 团队 开发 了 JavaScript 单元 测试 框架 QUnit,Angular JS 声称 
具有 可 测试 特性 等 。 


11.1.2 Web 前 端 测 试 工具 
Web 前 端 测试 工具 有 很 多 ,以 下 列举 六 种 。 
1. JS 单元 测试 框架 Jasmine 


Jasmine 是 一 个 用 于 测试 JavaScript 代码 的 单元 测试 框架 ,支持 行为 驱动 开发 
(Behavior-Driven Development. BDD) 。 它 不 依赖 于 任何 其 他 的 JavaScript 框架 。 它 不 需 
要 一 个 DOM。 其 简洁 `. 明 了 的 语法 让 你 可 以 轻松 地 编写 测试 。 

详 见 官网 https: //jasmine. github. io/. 
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2. QUnit 前 端 测试 工具 


QUnit 是 一 个 强大 的 JavaScript 单元 测试 框架 ,该 框架 是 由 jQuery 团队 的 成 员 开 发 
的 , 它 是 jQuery 的 官方 测试 套件 。QUnit 被 广泛 使 用 在 jQuery jQuery UI, jQuery Mobile 
等 项 目 中 , 它 可 以 测试 使 用 任何 JavaScript 库 编写 的 JavaScript 代码 ,包括 使 用 jQuery 编写 
的 JavaScript 代码 。 

详 见 官网 https://qunitjs. com/。 


3. JSHint 前 端 测 试 工具 


JSHint 是 一 个 静态 JavaScript 代码 分 析 工 具 , 它 与 JSLint 类 似 ,都 是 JavaScript 的 代 
码 质量 检查 工具 ,主要 用 来 检查 代码 质量 以 及 找 出 一 些 潜在 的 代码 缺陷 并 提供 相关 的 代码 
改进 意见 。 

使 用 方式 有 三 种 : 

第 一 种 方法 ,进入 JSHint 首页 ,粘贴 你 的 代码 ,选择 相关 的 选项 , 它 能 即时 分 析 代 码 , 提 
示 代 码 中 的 问题 。 

第 二 种 方法 ,使 用 命令 行 的 方式 检查 JavaScript 代码 。 

第 三 种 方法 ,在 IDE 中 使 用 JSHint, 很 多 文本 编辑 器 或 IDE 都 有 JSHint 插件 。 

详 见 官方 网 站 http://jshint. com, 


4. Mocha 


Mocha 是 一 种 功能 丰富 的 JavaScript 测试 框架 , 它 运 行 在 Node. js 和 浏览 器 上 ,使 异步 
测试 变 得 简单 和 有 趣 。Mocha 测试 可 以 连续 运行 , 它 提供 了 灵活 且 准 确 的 测试 报告 。 
详 见 官方 网 站 https: //mochajs. org, 


5. Karma 


Karma 是 一 个 简单 的 JavaScript 测试 工具 ,允许 用 户 在 多 个 真实 浏览 器 中 执行 
JavaScript 代码 。Karma 是 一 个 测试 运行 器 ,Karma 的 主要 目标 是 使 测试 驱动 开发 更 容易 、 
更 快速 和 更 有 趣 。 通 过 使 用 插件 ,Karma 可 以 和 测试 框架 (例如 ,Jasmine、Mocha、QUnit) 
一 起 使 用 。Karma 主要 用 于 JavaScript 单元 测试 ,也 可 以 用 于 系统 测试 ( 端 到 端的 测试 ) 。 
对 于 AngularJS 代码 ,可 以 使 用 karma-ng-scenario 插件 进行 端 到 端的 测试 。 建 议 使 用 
Protractor 进行 端 到 端的 测试 。Protractor 是 一 个 Angular 和 AngularJS 应 用 的 端 到 端 测 
试 框架 。 在 持续 集成 服务 器 (例如 ,Jenkins、Semaphore、TeamCity 或 Travis) 上 可 以 使 用 
Karma, 

详 见 官方 网 站 http: //karma-runner. github. io/2. 0/index. html, 


6. Jubula 


Jubula 是 一 个 免费 的 跨 平 台 的 自动 化 GUI 测试 工具 ,是 Eclipse 的 一 个 插件 。 它 来 源 
于 BREDEX GmbH 公司 的 商业 测试 工具 GUIDancer。BREDEX GmbH 公司 也 提供 了 一 
个 独立 版 本 的 Jubula。 
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前 端 实现 技术 不 仅仅 有 HTML 和 JavaScript, 还 有 JavaFX.SWT.RCP 和 Swing. 

JavaFX 提供 了 强大 的 、 基 于 Java 的 UI 平台 ,能 够 处 理 数 据 驱 动 的 大 型 业务 应 用 程 
序 。JavaFX 应 用 程序 完全 是 用 Java 开发 的 ,同时 利用 了 基于 标准 的 编程 实践 和 设计 模式 
的 强大 力量 。JavaFX 提供 了 一 组 丰富 的 UI 控件 、 图 形 和 媒体 API, 并 带 有 高 性 能 的 硬件 
加 速 图 形 和 媒体 引擎 ,以 便 简 化 可 视 化 应 用 程序 的 开发 。 

SWT(Standard Widget Toolkit) 是 一 个 开源 的 GUI 编程 框架 ,与 AWT/Swing 有 相似 
的 用 处 ,著名 的 开源 IDE-Eclipse 就 是 用 SWT 开发 的 。 在 SWT 之 前 ,Sun 已 经 提供 了 一 个 
跨 平台 GUI 开发 工具 包 AWT (Abstract Window Toolkit)。AWT 框架 底层 使 用 原生 窗口 
部 件 (native widgets) 构 建 , 只 能 使 用 各 个 平台 窗口 部 件 的 子 集 。 

RCP(Rich Client Platform) 指 富 客 户 端 平台 ,一 种 广泛 的 基于 Web 的 应 用 客户 端 , 其 
特点 是 服务 同 表 现 完全 地 物理 分 离 ,表现 逻辑 完全 由 客户 端 来 负责 。 

Swing 是 一 个 用 于 开发 Java 应 用 程序 用 户 界面 的 开发 工具 包 。Swing 以 抽象 窗口 工 
有 具 包 (AWT) 为 基础 使 跨 平 台 应 用 程序 可 以 使 用 任何 可 插 拔 的 外 观 风格 。Swing 开发 人 员 
只 用 很 少 的 代码 就 可 以 利用 Swing 丰富 、 灵 活 的 功能 和 模块 化 组 件 来 创建 优雅 的 用 户 
界面 。 

Jubula 支持 用 HTML JavaFX.SWT.RCP 和 Swing 实现 的 前 端 测试 。 

详 见 官方 网 站 http://www. eclipse. org/jubula/ 。 


(11.2 Jasmine 测试 起 步 
本 节 介 绍 Web 前 端 测试 工具 Jasmine 的 安装 和 示例 代码 。 


11.2.1 Jasmine 的 安装 


在 Jasmine 官网 https://github. com/jasmine/jasmine # installation 下 载 Jasmine 独立 
版 jasmine-standalone-3. 1. 0. zip. 

在 Web 应 用 项 目 文件 夹 下 创建 一 个 子 文件 夹 jasmine。 

将 jasmine-standalone-3. 1.0. zip 解压 到 新 创建 的 jasmine 文件 夹 下 。 

将 下 面 的 代码 增加 到 你 的 HTML 文件 中 : 

«link ге] = "shortcut icon" type = "image/png" href = "jasmine/lib/jasmine - {3. 1. 0}/jasmine_ 


favicon. png"> 
< link rel = "stylesheet" type = "text/css" href = "jasmine/lib/jasmine- {3.1.0}/jasmine. css"> 


<script type = "text/javascript" src = "jasmine/lib/jasmine — {3.1.0}/jasmine. js"></script > 
< script type = "text/javascript" src = "jasmine/lib/jasmine- {3.1.0}/jasmine – html. js"></script > 
<script type = "text/javascript" src = "jasmine/lib/jasmine — {3.1.0}/boot. js"></script > 
解压 后 的 主要 文件 夹 和 文件 如 下 : 
* lib Jasmine 测试 框架 文件 夹 ,包含 了 三 个 JS 文件 .一 个 样式 表 文 件 和 一 个 图 标 
XH. 


* spec 


测试 示例 代码 文件 夹 ,包含 了 两 个 JS 文件。 
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源 代码 文件 夹 , 包 含 了 两 个 待 测 的 TS 文件 。 


* SpecRunner. html 测试 示例 运行 器 文件 ,在 浏览 器 中 打开 这 个 文件 ,将 执行 测试 
示例 ,如 图 11.1 所 示 。 


2602S 9.1 > 只 文件 ав бш IR 帮助 | 首 п x 


C @ w © file:///H:/TestLab/workspace/MyProject/jasmine/SpecRunner.t # v 


I> EH (issmine/jasmine: Si x | «iv JavaScript 7:08 х | @ Jasmine Spec Кипп x TD 


图 Jasmine 3.1.0 options 


Player 


#resume 
should throw an exception if song is already playing 
should be able to play a Song 


when song has been paused 
should be possible to resume 
should indicate that the song is currently paused 


tells the current song if the user has made it a favorite 


图 11.1 测试 示例 执行 结果 


11.2.2 示例 代码 解析 


PlayerSpec. js 文件 如 下 : 


describe("Player"，function() { 
var player; 
var song; 


beforeEach(function() { 
player = new Player(); 
song = new Song(); 


р; 


it("should be able to play a Song", function() { 
player. play(song) ; 
expect (player. current 1yPlayingSong) . toEqual (song) ; 


//demonstrates use of custom matcher 
expect (player Libebpiayinn song): 
Di 


describe("when song has been paused", function() [ 
beforeEach(function() { 
player. play(song) ; 
player. pause() ; 
р; 
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it("should indicate that the song is currently paused", function() { 
expect (player. isPlaying).toBeFalsy(); 


// demonstrates use of 'not' with a custom matcher 
expect (player). not. toBePlaying( song); 
n; 


it("should be possible to resume", function() { 
player. resume() ; 
expect (player. isPlaying).toBeTruthy(); 
expect (player. currentlyPlayingSong) . toEqual (song) ; 
р; 
р; 


// demonstrates use of spies to intercept and test method calls 
it("tells the current song if the user has made it a favorite", function() { 
spyOn(song, 'persistFavoriteStatus') ; 


player. play(song) ; 
player. makeFavorite() ; 


expect (song. persistFavoriteStatus).toHaveBeenCalledWith(true); 
р; 


//demonstrates use of expected exceptions 

describe(" # resume", function() { 

it("should throw an exception if song is already playing", function() { 
player. play(song) ; 


expect (function() { 
player. resume() ; 
}). toThrowError("song is already playing"); 
D 

n; 

describe 是 Jasmine 的 全 局 函数 ,作为 一 个 测试 套件 (Test Suite) 的 开始 , 它 通 常 有 两 
个 参数 : 字符 串 和 方法 。 字 符 串 作 为 特定 测试 套件 的 名 字 和 标题 。 方 法 是 包含 实现 测试 套 
件 的 代码 。PlayerSpec. js 包含 了 三 个 测试 套件 Player, when song has been paused fil # 
resume。 

全 局 函数 it 定义 了 Spec. ЖП describe 类 似 ,it 也 有 两 个 参数 : 字符 串 和 方法 。 每 个 
Spec 包含 一 个 或 多 个 expect 方法 ,用 于 测试 需要 测试 的 代码 。 例 如 ,it 代码 块 should be 
able to play a Song 中 包含 了 两 个 expect 方法 。 

Jasmine 中 的 每 个 expect 方法 都 是 一 个 断言 ,返回 值 可 以 是 true 或 者 false。 当 每 个 
Spec 中 的 所 有 expect 方法 返回 值 都 是 true 时 ,通过 测试 。 若 有 任何 一 个 expect 的 返回 值 
是 false, 则 未 通过 测试 。 而 方法 的 内 容 就 是 测试 主体 。 

JavaScript 的 作用 域 的 规则 仍然 适用 ,所 以 在 describe 定义 的 变量 对 测试 套件 中 的 任 
何 it 代码 块 都 是 可 见 的 。 
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expect 方法 定义 的 是 期 望 (Expectation) ,一 个 值 代表 实际 值 ; 另 一 个 是 匹配 的 值 ,代表 
期 望 值 。 例 如 ,expect(player. currentlyPlayingSong). toEqual (song) 的 实际 值 是 player. 
currentlyPlayingSong ,期 望 值 是 song。 

每 一 个 Matcher 返回 一 个 布尔 值 ,在 实际 值 和 期 望 值 之 间 比 较 。 它 负责 通知 Jasmine, 
此 expect 是 真 或 者 假 。 然 后 Jasmine 会 认为 相应 的 spec 是 通过 还 是 失败 。 例 如 ,expect 
(player. currentlyPlayingSong). toEqual(song) 中 的 toEqual() 就 是 一 个 Matcher。 任 何 
Matcher 可 以 在 调用 此 Matcher 之 前 用 not 的 expect 调用 ,计算 负 值 的 判断 。 例 如 ,expect 
(player). not. toBePlaying(song), toBePlaying 是 自 定义 的 Matcher, 在 SpecHelper. js X 
件 中 定义 了 toBePlaying。 

beforeEach(function () { 

jasmine. addMatchers( { 
toBePlaying: function () { 
return { 


compare: function (actual, expected) { 
var player = actual; 


return { 
pass: player. currentlyPlayingSong == = expected && player. isPlaying 
}; 
} 
}; 
} 
р); 
ni 
Jasmine 提供 了 全 局 的 beforeEach 和 afterEach 方法 。 正 像 其 名 字 一 样 ,beforeEach 
方法 在 describe 中 的 每 个 Spec 执行 之 前 运行 ,afterEach 方法 在 每 个 Spec 调用 后 运行 。 是 
不 是 似曾相识 ? 没 错 , 在 JUnit 单元 测试 框架 中 我 们 就 见 过 ,这 两 个 方法 分 别称 为 Setup 和 
Teardown 方法 。PlayerSpec. js 中 包含 了 两 个 beforeEach 方法 。 
describe п, Spec 可 以 定义 在 任何 一 层 。 这 样 就 可 以 让 一 个 测试 套件 由 一 组 树 
状 的 方法 组 成 。 在 每 个 Spec 执行 前 ,Jasmine 遍历 树 结构 , 按 顺 序 执行 每 个 beforeEach 77 
BE, Spec 执行 后 ,Jasmine 同样 执行 相应 的 afterEach 方法 。PlayerSpec. js 中 测试 套件 
Player 包含 了 两 个 测试 套件 when song has been paused fil # resume, 


11,3 Jasmine 测试 演练 


本 节 介 绍 测试 运行 器 Karma 和 Karma 与 Jenkins 的 集成 。 
11.3.1 测试 运行 器 Karma 


Karma 是 一 个 基于 Node. js 的 JavaScript 测试 执行 过 程 管 理工 具 (Test Runner), iZ 
工具 可 用 于 测试 所 有 主流 Web 浏览 器 ,也 可 和 集成 到 CI(Continuous Integration) 工 具 , 还 可 
以 和 其 他 代码 编辑 器 一 起 使 用 。 这 个 测试 工具 的 一 个 强大 特性 就 是 : 它 可 以 监控 (Watch) 
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文件 的 变化 ,然后 自行 执行 ,通过 console. log 显示 测试 结果 。 
1. Karma + Jasmine 环境 安装 和 配置 


1) 安装 Node. js 

ТЕ Node. js 官网 https: //nodejs. org/en/download/ Е Node. js 安装 程序 并 运行 。 
Node. js 附带 了 一 个 包 管 理工 具 npm。 

NPM 能 解决 Nodel. js 代码 部 署 上 的 很 多 问题 ,常见 的 使 用 场景 有 以 下 几 种 : 

。 允许 用 户 从 NPM 服务 器 下 载 别 人 编写 的 第 三 方 包 到 本 地 使 用 。 

。 允许 用 户 从 NPM 服务 器 下 载 并 安装 别人 编写 的 命令 行程 序 到 本 地 使 用 。 

。 允许 用 户 将 自己 编写 的 包 或 命令 行程 序 上 传 到 NPM 服务 器 供 别 人 使 用 。 

2) 安装 Karma 

新 建 一 个 文件 夹 , 例 如 ,D:\TestLab\Karma, 在 命令 行 输入 命令 : 

d: 

cd D:\TestLab\Karma 

npm i karma 
将 Karma 的 . bin 文件 夹 (例如 ,D:\TestLab\karma\node_modules\. bin) 加 入 到 PATH Ж 
境 变 量 。 

3) 初始 化 Karma, 生 成 配置 文件 karma. conf. js 

在 命令 行 输入 命令 : 

karma init 

按 Tab 键 选择 问题 的 答案 , 按 Enter 键 确认 选择 的 答案 ,继续 下 一 个 问题 。 执 行 以 下 步 
又 直到 完成 : 

Microsoft Windows [版 本 6.1.7601] 

版 权 所 有 (с) 2009 Microsoft Corporation. 保留 所 有 权利 . 

D:\TestLab\karma > cd D:\TestLab\karma\node_modules\. bin 


D:\TestLab\karma\node_modules\.bin>karma init 


Which testing framework do you want to use ? 
Press tab to list possible options. Enter to move to the next question. 


> jasmine 


Do you want to use Require. js ? 
This will add Require. js plugin. 
Press tab to list possible options. Enter to move to the next question. 


> no 


Do you want to capture any browsers automatically ? 

Press tab to list possible options. Enter empty string to move to the next quest 
ion. 

> Chrome 
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What is the location of your source and test files ? 
You can use glob patterns, eg. "js/ * . js" or "test/ ** / * Spec. js". 


Enter empty string to move to the next question. 
> 


Should any of the files included by the previous patterns be excluded ? 
You can use glob patterns, eg. "** /*.swp". 


Enter empty string to move to the next question. 
> 


Do you want Karma to watch all the files and run the tests on change ? 
Press tab to list possible options. 
> yes 


Config file generated at "D:\TestLab\karma\node_modules\. bin karma. conf. js". 


D:\TestLab\karma\node_modules\. bin» 


4) 安装 集成 包 karma-jasmine 
使 用 如 下 命令 安装 集成 包 karma-jasmine: 


npm i karma - jasmine 


5) 安装 jasmine-core 
使 用 如 下 命令 安装 jasmine-core: 


прп i jasmine - core -- save— dev 


6) 安装 html 测试 报告 插件 
使 用 如 下 命令 安装 html 测试 报告 插件 : 


npm i karma - jasmine – html – reporter -- save - dev 


Karma 插件 是 NPM 模块 ,因此 ,建议 在 package. json 文件 中 指定 依赖 ,以 便 安装 需要 
的 Karma 插件 。package. json 文件 的 内 容 如 下 所 示 : 


package. json: 

{ 
"devDependencies": { 
"karma": "~0.10", 
"karma — mocha": "~0. 0.1", 
"karma – growl – reporter": "~0.0.1", 
"karma – firefox— launcher": "~0.0.1" 
) 

) 


然后 ,使 用 如 下 命令 就 可 以 安装 Karma 插件 了 : 
npm install —— save- dev 


否则 ,使 用 命令 npm install karma—< plugin name > 一 save-dev 安装 一 个 插件 。 
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使 用 命令 npm list -depth=0 列 出 已 安装 的 Karma 插件 。 
2. 自动 化 单元 测试 步骤 


1) 创建 被 测 JS 文件 

创建 用 于 实现 某 种 业务 逻辑 的 文件 ,就 是 我 们 平时 写 的 JS 脚本 。 将 被 测 JS 文件 放 在 
11.2.1 节 所 创建 的 项 目 文件 夹 的 jasmine/src 文件 夹 中 。 例 如 ,实现 字符 串 按 逆序 重 排 的 
JS 文件 myjs.js 如 下 : 


function reverse(name) { 
return name. split(""). reverse(). join(""); 


} 


2) 创建 测试 文件 
将 测试 JS 文件 放 在 11. 2. 1 节 所 创建 的 项 目 文件 夹 的 jasmine/spec 文件 夹 中 。 符 合 
Jasmine API 的 测试 JS 脚本 myjs. spec. js 文件 如 下 : 


describe("A suite of basic functions", function() { 
it("reverse word", function(){ 
expect ("DCBA") . toEqual(reverse("ABCD" ) ) ; 
expect ("Conan"). toEqual(reverse("nano") ) ; 
D 
р; 


3) 修改 karma. conf. js 配置 文件 


我 们 只 修改 了 生成 的 karma. conf. js 中 的 files exclude 和 reporters 配置 项 。 修 改 后 的 
karma. conf. js 文件 如 下 : 


// Karma configuration 
// Generated on Sat Jun 09 2018 15:38:19 GMT+ 0800 (中 国标 准时 间 ) 


module. exports = function(config) { 
config. set({ 


// base path that will be used to resolve all patterns (eg. files, exclude) 
basePath: '', 


// frameworks to use 
// available frameworks: https: //npmjs. org/browse/keyword/karma — adapter 


frameworks: ['jasnine'], 


// list of files / patterns to load in the browser 
files: [ 

'‘workspace/jasmine/src/ ** / * .js', 
'workspace/jasmine/spec/ ** / * . spec. js" 

1, 
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// list of files / patterns to exclude 
exclude: [ 'karma. conf. js'], 


// preprocess matching files before serving them to the browser 
// available preprocessors: https://npmjs. org/browse/keyword/karma — preprocessor 
preprocessors: ( 


}, 


// test results reporter to use 

// possible values: 'dots', 'progress', 'kjhtml' 

// available reporters: https: //npmjs. org/browse/keyword/karma - reporter 
reporters: ['kjhtnl'], 


// web server port 
port: 9876, 


// enable / disable colors in the output (reporters and logs) 
colors: true, 


// level of logging 

// possible values: config.LOG DISABLE || config. LOG ERROR || config.LOG WARN || config. 
LOG INFO || config.LOG DEBUG 

logLevel: config.LOG INFO, 


// enable / disable watching file and executing tests whenever any file changes 
autoWatch: true, 


// start these browsers 
// available browser launchers: https: //npmjs. org/browse/keyword/karma - launcher 


browsers: ['Chrome'], 


// Continuous Integration mode 
// if true, Karma captures browsers, runs the tests and exits 
singleRun: false, 


// Concurrency level 
// how many browser should be started simultaneous 


290, 软件 测试 实战 教程 


`. 


concurrency: Infinity 
}) 
} 


4) 启动 Karma 
使 用 如 下 命令 : 


karma start karma. conf. js 


浏览 器 会 自动 打开 ,如 图 11.2 所 示 。 


Chrome 65.0.3298 (Windows 7 0.0.0) is idle 


图 11.2 Karma 启动 后 自动 打开 的 浏览 器 页 面 


单 击 DEBUG 按钮 ,显示 测试 报告 ,如 图 11. 3 所 示 。 
= 


sK Karma DEBUG RUNNE' X 


С Q localhost:9876/debug.html 


Options 


finished in 0.013s 


ec, 1 failure, randomized with seed 97408 


Spec List | Failures 


A suite of basic functions > reverse word 


Expected ‘Conan’ to equal ‘onan’. 
Error: Expected ‘Conan’ to equal ‘onan’. 


at <Jasmine> 
at UserContext.«anonymous» (http://localhost:9876/base/jasmine/spec/myjs. spec. js:4:20) 


at «Jasmine» 


图 11.3 Karma HTML 测试 报告 


修改 myjs. spec. js, 将 其 中 的 “expect("Conan"). toEqualCreverseC" nano") ; "f£ kr 9]: 


expect ("Conan"). toEqual(reverse("nanoC")) ; 
重新 单 击 图 11.2 中 的 DEBUG 按钮 ,显示 新 的 测试 报告 ,如 图 11.4 所 示 。 
5) 增加 代码 覆盖 率 检查 和 报告 


输入 如 下 命令 安装 karma-coverage: 
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C | © Iocalhost:9876/debug.html 


图 Jasmine 3.1.0 Options 


A suite of basic functions 
reverse word 


图 11.4 修改 JS 文件 后 的 测试 报告 
npm install karma - coverage 
修改 karma. conf. js 配置 文件 


reporters: [ 'kjhtml', 'coverage'], 
preprocessors : {'jasmine/src/myjs. js': 'coverage'], 
coverageReporter: ( 
type : ‘html’, 
dir : 'workspace/coverage/' 
}, 


重启 动 Karma, {Е Ж (Е Ж workspace/coverage/ 下 找到 index. html, 用 浏览 器 打开 


index. html 文件 ,如 图 11.5 所 示 。 


360 安 全 浏览 器 9.1 > 文件 查看 te IR |+ 一 D x 
@ & C € Ofle///D/TestLab/karma/workspace/covera 4 v Заз а) 
бй + [SUEDE 六 Bš rm ~ DAREI OAR - 四 Be + шан + (Dunt + [S 登录 管家 > 
1>) В | Г) Code coverage report for All х | + E 
I 


100% Statements 2/2 100% Branches @/@ 100% Functions 1/1 100% Lines 2/2 


File < * Statements - * Branches + + Functions + + Lines + 


; m 100% | 22 | 
[== [а | | 


100% | on | 100% 1/1 100% | 2/2 


Code coverage generated by istanbul at Sat Jun 09 2018 18:06:06 GMT+0800 (中 国标 准时 间 ) 


© Sate Бета ФО онва [jme € р уш P Ø п Ф Q100% 4 


81.5 测试 覆盖 率 报告 


2 


9 
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11.3.2 Karma 5 Jenkins 集成 


Jenkins 是 一 款 目前 最 为 流行 的 持续 集成 工具 ,我 们 在 第 5 章 已 经 做 了 介绍 。 那 么 ,如 
何 让 Karma 也 能 集成 到 Jenkins, 并 自动 执行 呢 ? 以 下 以 Windows 环境 为 例 ,介绍 Karma 
与 Jenkins 的 集成 。 


1. 准备 


设置 JENKINS_HOME 环境 变量 ,例如 ,JENKINS_HOME=D:\.jenkins。 在 命令 行 
用 命令 java -jar Jenkins. war 启动 Jenkins 服务 器 ,Jenkins 的 安装 和 使 用 详 见 第 5 章 。 

在 Jenkins 所 在 的 计算 机 上 安装 Node、Karma、Karma ift. PEI 11.3.1 W. 

安装 Karma 插件 karma-junit-reporter, 目 的 是 为 了 生成 XML 单元 测试 报告 ,以 便 在 
Jenkins Web 页 面 显 示 单 元 测试 报告 。 


2. 配置 Karma 
修改 11. 3. 1 节 示 例 中 的 Karma 配置 文件 Karma. conf. js, 需 要 修改 的 配置 项 如 下 : 


preprocessors : ('jasmine/src/ ** / * .js': 'coverage'), 
coverageReporter: { 

type : 'html', 

dir : 'coverage/' 


}, 
reporters: [ 'kjhtml1', 'соуегаде', 'junit'], 


junitReporter: ( 
outputDir: 'reports/', 
outputFile: 'test - results. xml', 


k 


singleRun = true; 


其 中 singleRun = true 配置 项 的 作用 是 保证 运行 测试 后 ,浏览 器 自动 退出 ,不 影响 下 次 
执行 。 


3. 创建 Jenkins 任务 


CD 新 建 一 个 自由 风格 的 软件 项 目 ,如 图 11.6 所 示 。 

(2) 选中 Github project, 输 入 项 目 源 代码 在 Github 仓库 的 地 址 ,如 图 11.7 Bras o 
(3) 选中 Git 源码 管理 ,输入 Repository URL, 如 图 11.8 所 示 。 

(4) 选中 Poll SCM 构建 触发 器 ,输入 日 程 表 , 如 图 11.9 所 示 。 

(5) 增加 构建 步骤 Execute Windows batch command, 输 入 如 下 命令 : 

d: 

cd D:\. jenkins\workspace\KarmaTest 

karma start karma. conf. js 
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Q FRES Uenkins] 
€ C | © localhost:2080/view, 


$ Jenkins D Administrator 188 


输入 一 个 任务 名 称 


> А job already exists with the name ‘KarmaTest’ 


—— 
.构建 一 个 白 由 风格 的 软件 项 目 

a IB Jenkins E WIDE Jenkcns 648 ASOMO JGR UE RIOR AE, BELUGA 
的 系统 


构建 一 个 maven 项 目 
构建 一 个 maven 顶 目 Jenions 利 用 人 83POM 文 件 BTU AA mR 


аки 
P qoman 4musmaqesq=s tenia. STEM свинсзаае»тея) ж 
ишана жна SEHD, 


个 多 配置 项 目 
ARAB MSTA FG 95 


图 11.6 新 建 一 个 自由 风格 的 软件 项 目 


Jenkins KarmaTest 


General nag 


[ 纯 文本 ] Ei 


描述 
М) GitHub project 


Project url http: iub.com/kehuagao/demo4 Jasmine. git/ 


) Throttle builds 


EA ”| 


图 11.7 输入 项 目 源 代码 在 Github 仓库 的 地 址 


for the run 
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Jenkins » KarmaTest » 


General 源码 管理 | ”构建 触发 器 MEHR 构建 构建 后 操作 2- | 


源码 管理 | 


өх 


Repositories 


Repository URL https://github.com/kehuagao/demod Jasmine. git ? 


Credentials 


图 11.8 输入 Git 源码 管理 项 目的 Repository URL 


Jenkins » KarmaTest » 


Genera 。 “源码 管理 | 构建 触发 器 | ”构建 环境 。“ 构建。 构建 后 操作 | 


构建 触发 器 


© GitHub hook trigger for GITScm polling 
D 其 他 工程 构建 后 触发 
D 定时 构建 


ә; 


єз 次 运行 的 时 间 2018105256 星期 四 上 午 09 时 09 分 15 秒 CST; 下 次 运行 的 
保存 EN 间 2018 年 10 月 25 日 星期 四 上午 09 时 11 分 15 秒 CST. 


11.9 设置 构建 触发 器 


第 11 章 


如 图 11. 10 所 示 。 


i Jenkins » KarmaTest » 


General “源码 管理 构建 触发 器 。 ”构建 环境 | 构建 | ”构建 后 操作 


Web 前 端 测试 


F |d: 
cd D: X jenkins\workspace\KarnaTest 
karma start karma conf. js 


图 11.10 输入 构建 命令 


(6) 增加 构建 后 操作 步骤 Publish HTML Report, 如 图 11. 11 所 示 。 


Jenkins » KarmaTest + 
General 。 ”源码 管理 — 构建 触发 器 。 ”构建 环境 шт 构建 后 操作 
增加 构建 步 要 ~ 
构建 后 操作 
Publish HTML reports Bu e 
Reports. 
HTML directory to archive _ coverage/Chrome 65.0.3298 (Windows 70.0.0. @ 
Index page[s] index html e 
Index page title[s] (Optional) ЖБ 2 e 
Report title БЕЯН HTML Report e 


Publishing options... 
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11.11 设置 构建 后 操作 步骤 Publish HTML Report 


(7) 增加 构建 后 操作 步骤 Publish JUnit test result report, 输 入 测试 报告 (XML ) 为 
reports/ ** / * , xml, 如 图 11.12 所 示 。 
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Jenkins » KarmaTest » 
General жит MAE — 构建 环境 к= 
Publish JUnit test result report ы e 


meen 


Fileset ‘includes’ setting that specifies the generated raw XML report 
files, such as "myproject/target/test-reports/" xm Basedir of the 


fileset is the workspace root. 
PM Ke e 
Health report amplification factor 1.0 e 
1% failing tests scores as 99% health. 5% failing tests scores as 
95% health 
Allow empty results © Do not fail the build on empty test results @e 


cae 
EB —- 


图 11.12 设置 构建 后 操作 步骤 Publish JUnit test result report 
(8) 保存 新 建 的 Jenkins 任务 。 
4. 执行 Jenkins 任务 ,查看 测试 报告 


Jenkins 任务 将 会 按照 我 们 的 设置 自动 执行 。 也 可 以 手动 执行 ,选择 Jenkins 任务 后 ， 
单 击 “立即 构建 ?选项 开始 执行 任务 ,如 图 11. 13 所 示 。 


@ Jenkins 2 5 | " 
deme KarmaTest » пеш 
шшк 
M us 工程 KarmaTest 
FL mm 
тате 
D smua | == | 
© wis 
ten R= š 
局 umapa, Report p mene 
D amaes N 
Done Ee 
@ Open Blue Ocean 相关 链接 
Bess + mine 2 月 сазга 
+ 8682586 2 B cases 
1 виюшповжо2Я салга 
Ku ge 


图 11.13 执行 Jenkins 任务 后 的 页 面 


单 击 “ 测 试 覆盖 率 HTML Report” Be ,将 显示 测试 覆盖 率 报告 ,如 图 11. 14 所 示 。 
单 击 图 11. 13 中 的 “最 新 测试 结果 ”链接 ,将 显示 单元 测试 报告 ,如 图 11. 15 所 示 。 
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Q localho x 


€ > G | © localhost:8080/j /KarmaTest/ e6b58b e8af95 e8a686 e79b96 e78e87HTML .. BJ *| но 


Back to KarmaTest [эге Zip © 
1 


100% Statements 2/2 100% Branches @/@ 100% Functions iyi 100% Lines 2/2 


Statements Branches Functions Lines 


Т Т 
100% | 2/2 | 100% | Ши] | 100% 1⁄4 | 100% | 2/2 


Code coverage generated by istanbul at Thu Jun 21 2018 22:41:27 GMT+0800 (中 国标 准时 间 ) 


图 11.14 显示 测试 覆盖 率 报告 


b/KarmaTest/ias 'edBulld/testReport/ 


@ Jenkins HG NETT 


Jenkins » Kamalest » #7 » Test Results 


© си Test Result 


=, OREM (40) 
= ете CC 


1483 (40) 
Bg rent zl 
= amaran (ginis 
Lin 所 有 的 测试 
a Environment Variables 


9 St Buio Data 
E от» Chrome 65.0.2298 (Windows 7000 4% 0 0 1 1 


Package 891 Жаш) Poem Pas can Ë (80 


[7] Test Resutt 


图 11.15 显示 单元 测试 报告 


11,4 知识 拓展 : Jubula 介绍 


本 节 介 绍 前 端 测试 工具 Jubula。 
11.4.1 Jubula 起 步 


在 官网 http://www. eclipse. org/jubula/( 3X https://testing. bredex. de/) F 载 
Jubula。 下 载 安 装 步 又 简 述 如 下 : 

。 打开 下 载 页 面 。 

。 注册 和 登录 。 

。 单 击 下 载 安装 程序 链接 。 
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* f£ Jubula 下 载 部 分 单 击 下 载 页 面 。 


Ü Jubula 


。 根据 操作 系统 下 载 相应 的 安装 程序 。 @ Jubula Uninstaller 

+ 使 用 下 载 的 . exe PE BEE TENE SC HEIR FETE W ik {iz | m 
置 (本 书 保存 在 C:\ Program Files). €f Stop AUT Agent 

。 一 旦 安装 完成, 便 可 以 从 “所 有 程序 ”中 启动 Jubula 或 图 11.16 启动 Jubuls 或 启动 
启动 AUT Agent, 如 图 11. 16 所 示 。 AUT Agent 的 菜单 


Jubula 启动 后 的 界面 如 图 11. 17 所 示 。 


р... | Te.. :: 
[=] 


Not connected to AUT Agent К | 141М of 806M 


图 11.17 Jubula 启动 后 的 界面 


Jubula 有 三 个 透视 图 Function Test Specification, Function Test Execution 和 
Function Test Reporting。 可 以 单 击 Window — Open Perspective > Function Test 
Specifition/ Window — Open Perspective 一 Function Test Execution/ Window — Open 
Perspective>Function Test Reporting 菜单 项 进行 透视 图 的 切换 ,也 可 以 单 击 右 上 角 的 三 
个 图 标 完 成 透视 图 的 切换 。 

单 击 Window 一 Preferences 菜单 项 可 进行 一 些 设置 ,如 图 11. 18 所 示 。 

展开 左边 的 Test, 选 择 Database Connection. ,如 图 11. 19 所 示 。 

单 击 Add fz £l ,增加 数据 库 连接 设置 或 修改 数据 库 连 接 设置 。Jubula 提供 了 四 种 数据 
库 支 持 : H2.Oracle.MySQL 和 PostGreSQL。Jubula 内 置 了 H2 数据 库 , 默 认 的 H2 设置 
如 图 11.20 所 示 。 

H2 数据 库 文件 默认 存放 在 C:\Users\lenovo\. jubula\database( 注 : lenovo 是 登录 
Windows 的 账号 ) ,如 果 H2 数据 库 出 现 问 题 ,那么 可 以 删除 H2 数据 库 文件 ,Jubula 可 重建 
数据 库 文件 。 

单 击 Test>Select Database 菜单 项 连接 数据 库 。Jubula 中 的 测试 项 目 信息 都 保存 在 
数据 库 中 ,因此 ,必须 首先 连接 数据 库 ,才能 新 建 测 试 项 目 。 
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Ф- 9-5 


Е Always run in background 
[| Keep next/previous editor, view and perspectives dialog open 
[Vj Show heap status 
Workbench save interval in minutes): 5 
Open mode 
@ Double dick 
© Single dick 
口 selec on hover 
Пореп when using arrow keys 
Note: This preference may not take effect on all views 


Er 


图 11.18 Preferences 设置 


jdbch2:-/ jubula/database/embedded:MVCC-TRUEAUTO SERVER-TRUE;DB CLOSE. ОМ EXIT-FALSE 


ss 


图 11. 20 默认 的 H2 设置 
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单 击 工具 栏 中 的 Connect to AUT Agent 按钮 ,连接 到 AUT Agent, fE Jubula 底部 的 
状态 栏 中 将 显示 连接 到 AUT Agent 的 状态 信息 ,如 图 11.21 所 示 。 


File Edit Test Search Run Window Help 


[lig si- Gir OORFF-F'O- @: Ç 


E Problems | 4? Search| © Console 2: | k BB | м El - 3-7 = n 
‘Console = 
Connection to Database successful. ^ 1G Component .. х 


С 
W oa. | Te.. 2 
в 


‹ 


Connected to AUT Agent localhost:60000 | 527M of 806M 


Р 11.21 连接 到 AUT Agent 的 状态 信息 


11.4.2 Jubula 演练 


Jubula 自 带 了 两 个 AUT:DVDTools 和 SimpleAdder, FI LA SimpleAdder 为 例 , 演 
示 Jubula 用 于 测试 的 操作 步骤 。 

Step 1 ,创建 项 目 , 单 击 Test New 菜单 项 打开 新 建 项 目 向 导 , 输 入 项 目 名 称 , 例 如 
MyProject, 选 择 项 目 工具 箱 为 concrete, AUT. 工具 箱 为 swing, 输 入 AUT 执行 文件 的 路 径 
为 C:\Program Files \ jubula_ 8. 5. 0. 127 V examples \ AUTs \ SimpleAdder \ swing V 
SimpleAdder. cmd, 如 图 11. 22 所 示 。 

单 击 Finish 按钮 ,结果 如 图 11.23 所 示 。 

Step 2, 设 置 AUT( 可 选 ) 。 

在 Test Suite 浏览 窗口 中 , 右 击 MyProject 项 目 , 单 击 Properties 菜单 项 ,在 项 目 属性 
对 话 框 中 , 单 击 AUT 属性 ,选择 MyProject, 单 击 Edit 按钮 ,可 设置 AUT. 

Step 3, 创 建 测试 用 例 , 在 Test Case 浏览 窗口 中 , 右 击 Test Cases: 项 , 单 击 New 
New Test Case 菜单 项 ,创建 一 个 测试 用 例 一 一 My Test Case。 

在 左下 角 的 测试 用 例 浏览 窗口 中 双击 My Test Case 测试 用 例 , 打 开 测 试用 例 编辑 器 。 

在 左下 角 的 测试 用 例 浏览 器 中 ,展开 内 置 的 测试 用 例 模 板 unbound_modules_concrete， 
将 Action(basic)-Input via Keyboard-Component with Text Input 下 的 ub_cti_replaceText 
拖 动 到 测试 用 例 编辑 器 (重复 一 次 这 个 操作 )。 

将 Action(basic)-Click 下 的 ub grc clickLeft single 拖 动 到 测试 用 例 编辑 器 。 
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Project properties 
Define a new Project. 
You can adapt the project defaults via the Project Properties later on. 


Project name: MyProject 
Projecttoolkit8 [concrete - 
AUT toolkit: swing — = 


AUT executable; — C.\ program Files\jubula_8.5.0.127\examples\AUTs\SimpleAdder\swing\Sir 


[V] Load project template т 


You can specify how to start your AUT now, or click "Finish" and configure your AUT later. 
If your AUT requires extra parameters or start information, then you can configure these. 
things in the Project Properties. 


图 11.22 创建 项 目 


Window Help 


шь Ое qeu qe Sio orci 


Eg Progress аф@-< = о = [al 


@ Test Suite Browser 31% 8 - Б | 7" = 5 
[type filter tee — _ 


[B Test Case Browser 2 |@ Component Nam... 
SFB 


А Sear |Ë) Соп. 3| ^ B 
REE re 9 + rs - 


Importing unbound modules r ^ 
Finished imnartine unhound ~ 
D 


| Not connected to AUT Agent = Billion or s23m Lj 


图 11.23 新 建 的 MyProject 项 目 
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将 Action(basic)-Check-Component with Text 下 的 ub_ctx_checkText 拖 动 到 测试 用 


例 编辑 器 。 


这 样 新 建 了 四 个 测试 步骤 ,修改 其 属性 如 表 11. 1 所 示 。 
表 11.1 测试 步 又 对 应 的 属性 及 值 


Property 


Value 


Test Case Reference Name 


Enter Valuel 


TEXT[String] =Valuel 

Test Case Reference Name Enter Value2 
TEXT[String] 一 Value2 

Test Case Reference Name Click Equals Button 
Test Case Reference Name Check Result 
TEXT[String] — Result 


它们 相应 的 组 件 名 称 修 改 为 txtValuel .txtValue2 .btnEqulas .txtResult。 四 个 测试 步 


又 的 属性 设置 如 图 11. 24 一 图 11. 27 所 示 。 


4. Оа Мате New Name 


nnn di 


[Г] Properties £2 "mB--n 
[Г] Properties 21 ма >= а 
Property Value 
Test Case Reference Name Breet, yale 
Specification Name ub_cùreplaceText | Tess Cano Reference Nama! 
emen Specification Name ub, cti replaceText 
Task ID c 
JUnitTestsuite false Eid . à 
‘Test Data т — false 
Data Source Local Test Case o> — 
Excel Data File = Dots Hle e - 
Central Test Data Set | Test Data Set 
Para i 4 Parameter 
€ TEXT [String] € ТЕХТ [string] 
a (опаа ; 
П Component Names 22 n ec ^ = =o 


4. Old Name New Name ту 
E плс т; 


< | * 
E Data Sets 21 BIB-n 
type filter text ] 
# TEXT 
1 =Valuel 


аана [tse] [eet ][0 ][] 


测试 步骤 1 的 属性 设置 


11. 24 


1 =Value2 


Add Insert Delete |[ 0] [ «| 
11.25 测试 步骤 2 的 属性 设置 


Step 4, 准 备 测试 数据 ,在 测试 用 例 编辑 器 中 ,选择 My Test Case。 在 右 下 角 的 数据 视 
图 中 单 击 Add 按钮 ,增加 测试 数据 ,如 图 11. 28 所 示 。 


单 击 工具 栏 中 的 保存 按钮 ,保存 测试 用 例 。 
Step 5, 创 建 测试 用 例 集 。 
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E Properties 22 ЮМ 4535) [Г] Properties 21 mB-u 
Property Valus Property Vi E 
Test Case Reference Name Test Case Reference Na 
Specification Name ub_greehekleht singh ‘Specification Name ub cor Text 
‘Comment ‘Comment 
Task ID Task ID 
JUnitTestsuite false JUnitTestsuite false 

4 Test Data 4 Test Data 
Data Source No Test Data Data Source Local Test Case 
Excel Data File Excel Data File 
Central Test Data Set Central Test Data Set 
4 Parameter 
© TEXT [String] Result 
9 OPERATOR [String] equals = 

< lu › (LÁ G 

@ Component Names 5: | art @ Component Names 22 EI 

4. Оа Name New Name Ty + OldName New Name Ty 

E nmgr Сеты 5 G E nnn ctx т 

лл las] + * ————— к 

Ё Data Sets 53 БЕ = п Е Data Sets 22 а = п 

type filter text type filter text 

* # TEXT OPERATOR 

w 

[ ла |[ шет ][ Delete ][2][ Addis] | ет Delete } [5 ] [4 

图 11.26 测试 步骤 3 的 属性 设置 图 11.27 测试 步骤 4 的 属性 设置 
озь Sets 2 | Md Test Result з] 
type filter text 
# Valuel Value2 Result 
1 -5 10 5 
2 5 10 15 
з 100 99 199 


TT * 


CR) ме Је ) ae) 
图 11. 28 增加 测试 数据 


在 左边 的 测试 用 例 集 浏览 窗口 中 右 击 MyProject ИҢ. Мез New Test Suite Ж 
单项 ,新 建 一 个 名 称 为 My Test Suite 的 测试 用 例 集 。 双 击 新 建 的 测试 用 例 集 My Test 
Suite, 打 开 测 试用 例 集 编辑 器 。 将 测试 用 例 浏览 窗口 中 的 测试 用 例 My Test Case 拖 动 到 
测试 用 例 集 编辑 器 中 ,如 图 11. 29 所 示 。 

单 击 工具 栏 中 的 保存 按钮 ,保存 测试 用 例 集 。 

Step 6, 将 AUT 分 配给 测试 套件 (可 选 ) 。 

在 测试 用 例 集 编 辑 器 中 选择 My Test Suite, 设 置 测试 用 例 集 My Test Suite 的 属性 
AUT Name 为 MyProject, 如 图 11. 30 所 示 。 

Step 7, 使 用 技术 对 象 标识 符 映射 逻辑 测试 对 象 。 

在 测试 用 例 集 浏览 窗口 中 右 击 My Test Suite 测试 套件 , 单 击 Open with— Object 
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E Running AUTs 12 |95 Progress| à @ - = C |җЁтс/мутейСме — al “TS / My Test Suite 52 
4 @ My Test Suite 
«My Test Case» [Value]; Value2; Result] 
@ Test Suite Browser 52 =o 
%@-əl> v 
[type filter text 
4 ЧФ MyProject 
> @ INCUBATION 
@ My Test Suite 
» @ PRODUCTIVE 
b @ work 
El Test Case Brow... 5: |@ Component Ма„ ^ С 
Sele v 
уре filter text 
4 @ Test Cases: 
> & unbound modules concrete [8.5] 
> Ge 00 - Application Test Cases 
b G 01 - Contexts = 
b @ 02 - Technical Keywords T3 Problems | # Search | Console 22 Boe 
`Y s E Databa: ful. 
onne: о Database successful. 
> B My Test Case [Value]; Volue2 Resul] INFO: Project "Demo" in version 8.5 requires the followin 
图 11.29 创建 测试 用 例 集 
@ TS / My Test Suite £3 EUM 


4 @ My Test Suite 
BE <My Test Case» [Value]; Value2; Result] Test Suite Name 
Comment 
Task ID 
Step delay 
AUT Name 
Relevant 
4 Default Event Handler 


11.30 将 AUT 分 配给 测试 套件 


Mapping Editor 菜单 项 。 

单 击 工具 栏 中 的 Start AUT 按钮 (或 者 按 Ctrl К 键 ) ,打开 对 象 映射 编辑 器 。 

单 击 工具 栏 中 的 Start Object Mapping Mode 按钮 ,启动 对 象 映射 模式 。 

将 光标 移动 到 AUT 界面 的 组 件 上 , 按 Ctrl 二 Shift+Q 键 ,将 组 件 名 称 添 加 到 对 象 映 射 
编辑 器 的 未 分 配 技 术 名 称 列表 框 ,如 图 11. 31 所 示 。 

将 未 分 配 组 件 名 称 列表 框 中 的 测试 组 件 名 称 拖 动 到 未 分 配 技 术 名 称 列表 框 相应 的 技术 
名 称 上 完成 待 测 组 件 与 测试 组 件 的 配对 ,如 图 11. 32 所 示 。 

Step 8, 执 行 测 试用 例 集 。 
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FIM HO Be 
LE тс / My Test Cose. 


GETS / My Test Suite ШЙ OM / MyProject 12 


图 11.31 未 分 配 技术 名 称 列表 框 


Ëf TC / My Test Case 


[gf TS / My Test Suite 
Ө login login. btn 
Ө login password bf 
Ө login username tf 


Jg ‘ом / MyProject 22 | 


[type iter text 


图 11.32 待 测 组 件 与 测试 组 件 的 配对 
删除 测试 用 例 集 中 不 必要 的 模板 和 测试 用 例 中 不 必要 的 模板 , 单 击 工具 栏 中 的 保存 按钮 。 
单 击 Window—Open PerspectiveFunction Test Execution 菜单 项 。 


单 击 测试 用 例 集 工具 栏 中 的 Start Test Execution 按钮 ,启动 测试 过 程 。 可 观察 到 
AUT 的 运行 情况 ,如 图 11. 33 所 示 。 


E unning Am H] ГІ EXAM Tp 


> V My Test Case - 00001804 [-5, 10, 5] 
* Y. My Test Case - 00001777 (5, 10, 15] 


| 4 Y My Test Suite - 0:00:05.390 
| m 


Hi Test Suite Browser t| % Ө + 
уре fiber text 


se 77 5) 


^E MyProject 
> Q My Test Suite 


Gin 


任务 1: 安装 Jasmine. F Ër PUT Jasmine 附带 的 测试 示例 。 
任务 2: 安装 和 配置 Karma, 对 一 个 简单 的 JavaScript 文件 进行 单元 测试 。 
任务 3: 参照 11. 3. 2 节 的 演示 ,在 Jenkins 中 创建 任务 ,自动 执行 Karma, 


11.33. ”执行 测试 用 例 集 


本 附录 中 简单 介绍 了 软件 开发 和 测试 中 常用 的 工具 Docker, Maven 和 Git。 在 本 书 的 
多 处 用 到 了 这 些 工具 ,由 于 篇 幅 所 限 ,我们 只 是 介绍 了 这 些 工具 的 最 基本 的 使 用 方法 ,目的 
是 提供 一 个 速 查 方式 。 


А.1 Docker 基础 


什么 是 Docker 


Docker 是 开发 人 员 和 运 维 人 员 用 容器 开发 ,部署 和 和 运行 应 用 的 平台 。 用 Linux 容器 部 

应 用 被 称 为 容器 化 。 容 器 化 越 来 越 流行 是 因为 容器 具有 如 下 优点 : 

。 灵 活 一 一 即使 是 最 复杂 的 应 用 程序 也 可 以 被 容器 化 。 

* 轻 量 级 一 一 容器 利用 并 共享 主机 内 核 。 

* 可 互 换 一 一 可 以 即时 部 署 更 新 和 升级 。 

。 可 移植 一 一 可 以 在 本 地 构建 ,部 署 到 云 , 并 在 任何 地 方 运行 。 

。 可 伸缩 可 以 增加 和 自动 分 发 容器 副本 。 

。 可 堆 蕉 一 一 可 以 垂直 和 动态 地 堆 秋 服务。 

通过 运行 镜像 启动 容器 。 镜 像 是 一 个 可 执行 的 包 , 它 包含 运行 应 用 程序 所 需 的 所 有 内 
容 一 一 代码 ,运行 时 、 库 、 环 境 变量 和 配置 文件 。 

容器 是 镜像 的 运行 时 实例 , 它 可 以 被 启动 .开始 、 停 止 \ 删 除 。 每 个 容器 都 是 相互 隔离 
的 ,保证 安全 的 平台 。 

可 以 把 容器 看 作 是 一 个 简易 版 的 Linux 环境 (包括 root 用 户 权限 、 进 程 空间 、 用 户 空 间 
和 网 络 空间 等 ) 和 运行 在 其 中 的 应 用 程序 。 

Docker 仓库 是 集中 存放 镜像 文件 的 场所 。 有 时 候 会 把 仓库 和 仓库 注册 服务 器 
(CRegistry) 混 为 一 谈 ,并 不 严格 区 分 。 实 际 上 ,仓库 注册 服务 器 上 往往 存放 着 多 个 仓库 ,每 
个 仓库 中 又 包含 了 多 个 镜像 ,每 个 镜像 有 不 同 的 标签 (tag) 。 

仓库 分 为 公开 仓库 (Public) 和 私有 仓库 (Private) 两 种 形式 。 

最 大 的 公开 仓库 是 Docker Hub(https://hub. docker. com/) ,存放 了 数量 庞大 的 镜像 
供用 户 下 载 。 


当然 ,用 户 也 可 以 在 本 地 网 络 内 创建 一 个 私有 仓库 。 

当 用 户 创 建 了 自己 的 镜像 之 后 就 可 以 使 用 push 命令 将 它 上 传 到 公有 或 者 私有 仓库 ， 
这 样 下 次 在 另外 一 台 机 器 上 使 用 这 个 镜像 时 候 , 只 需要 从 仓库 上 pull 下 来 就 可 以 了 。 

镜像 仓库 .镜像 和 容器 的 关系 如 图 A. 1 所 示 。 


本 地 镜像 文件 
pull 从 仓库 获取 镜像 
push 将 镜像 文件 存储 到 仓库 
实 
提 
fii 交 
化 = 
t 
CENE 


图 A.1 镜像 仓库 .镜像 和 容器 的 关系 


Docker 很 像 虚拟 机 ,但 却 不 是 虚拟 机 。 在 传统 的 虚拟 机 环境 ,首先 需要 有 一 台 计 算 机 ， 
然后 在 计算 机 上 安装 操作 系统 ,再 安装 虚拟 机 监视 器 ,例如 ,VirtualBox (https://www. 
virtualbox. org) 或 VMware(http://www. vmware. com)。 最 后 ,可 以 在 虚拟 机 监视 器 上 创 
建 虚拟 机 镜像 。 虚 拟 机 镜像 是 一 个 逻辑 计算 机 ,有 自己 的 BIOS 和 模拟 硬件 ,可 以 在 虚拟 机 
镜像 中 安装 操作 系统 ,这 个 操作 系统 可 以 与 原 计算 机 上 的 操作 系统 相同 ,也 可 以 不 同 。 因 
此 ,可 以 在 一 台 计 算 机 上 实现 多 个 操作 系统 环境 。 虚拟 机 架构 如 图 A. 2 所 示 。 

Docker 与 虚拟 机 有 些 不 同 。Docker 是 一 个 安装 在 主机 上 的 程序 ,相当 于 虚拟 机 监视 
ait. Docker 可 以 在 容器 中 启动 应 用 ,容器 是 被 隔离 的 ,就 像 虚拟 机 。 但 是 容器 没有 自己 的 
操作 系统 ,容器 使 用 的 是 主机 的 操作 系统 。 这 一 点 与 虚拟 机 不 同 , 虚 拟 机 可 以 有 自己 的 操作 
系统 。Docker 架构 如 图 A. 3 所 示 。 

Em 


虚拟 机 虚拟 机 mum 
操作 系统 操作 系统 uri 


宿主 机 操作 系统 


图 A.2 虚拟 机 架构 示意 图 图 А.з Docker 架构 示意 图 
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与 虚拟 机 比较 ,Docker 有 如 下 优点 : 

。 容器 比 虚 拟 机 节省 资源 。 

* 容器 的 启动 比 虚拟 机 更 快 。 

。 不 同 的 容器 可 以 交互 ,可 以 使 用 多 个 容器 组 成 一 个 更 复杂 的 环境 。 例 如 ,我 们 需要 
一 个 LNMP(Linux、Nginx、MySQL 和 PHP) 环境, 可 以 在 一 个 Linux 虚拟 机 中 安 
X Nginx, PHP 和 MySQL。 也 可 以 使 用 两 个 Docker 容器 构建 LNMP 环境 : 一 个 
容器 安装 了 Nginx 和 了 PHP, 另 一 个 Docker 容器 安装 了 MySQL, Docker 实现 方案 
更 具有 弹性 。 


Docker 的 安装 


Docker 是 建立 在 Linux 的 基础 上 的 ,这 意味 着 ,Docker 容器 使 用 的 是 主机 的 Linux 操 
作 系 统 。 在 Linux 环境 下 安装 Docker 相对 比较 简单 。 下 面 以 Windows 7(64 位 为 例 ) 。 

按照 Docker 官网 上 的 说 明 , 若 要 安装 Docker for Windows, 在 Windows 上 运行 
Docker, 系 统 要 求 , Windows10x64 位 ,支持 HyperV。 如 果 Windows 版 本 过 旧 (Windows 
7/8.1) ,可 以 使 用 Docker Toolbox 在 Windows 上 运行 Docker。 因 此 ,在 Windows 环境 运 
17 Docker, fh; € РА Docker Toolbox 或 Docker for Windows, 

Docker Toolbox 的 官网 下 载 地 址 是 : 

https://docs. docker. com/toolbox/overview/ # ready-to-get-started 

如 果 下 载 速 度 很 慢 , 可 以 使 用 国内 的 下 载 地 址 https://get. daocloud. io/ & install- 
docker-for-mac-windows。 访 问 这 个 地 址 ,如 图 A.4 所 示 。 


Ñ? DaoCloud xa we 社区 xe FR 
在 Windows/Mac 上 安装 Docker 


Docker for Windows 在 Windows 上 运行 Docker。 系 统 要 求 ，Windows10x64 位 ,支持 Hyper-V.。 


Docker for Mac 在 Mac 上 运行 Docker。 系 统 要 求 ，OS X 10.10.3 或 者 更 高 版 本 ， 至 少 4G 内 存 ，4,3,30 版 本 以 前 的 VirtualBox 会 
与 Docker for Mac 产 生 冲 突 ， 所 以 请 逢 载 I 昌 版 本 的 VitrualBox， 


如 果 您 的 电脑 版 本 过 | 旧 ,可 以 使 用 Docker Toolbox 在 Windows 或 者 Mac 上 运行 Docker。 适 用 于 Mac OS X 10.8+ 或 者 
Windows 7/8.1, 


下 载 Docker for Windows | Та Docker for Mac 


А.4 Т Docker Toolbox 


Sidi“ F & Docker Toolbox” 按 钮 ,将 显示 Docker Toolbox 的 各 个 版 本 ,选择 下 载 最 新 
版 本 DockerToolbox-18. 01. 0-ce. ехе. Ш А. 5 所 示 。 

双击 下 载 的 Docker Toolbox 安装 文件 DockerToolbox-18. 01. 0-ce. exe. Д A. 6 所 示 。 

在 Docker Toolbox 安装 向 导 中 ,一 步 一 步 单 击 Next 按钮 。 可 以 指定 安装 文件 夹 ,如 
图 A.7 所 示 。 

单 击 Next 按钮 ,将 看 到 Docker Toolbox 包含 的 工具 ,可 以 根据 需要 选择 安装 ,如 图 A.8 
所 示 。 


Index of Docker Toolbox 
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DockerToolbox-18, 01, 0-ce, exe 2018-01-11T22:39:467 
DockerToolbox-18, 01. 0-ce, pkz 2018-01-11T22:39:247 


2018-01-11T22:40: 077 


2018-01-11T22:40:057 


DockerToolbox-17. 12.0-ce exe 2017-12-28T03:31: 322 


2011-12-28103:31:231 
图 A.5 选择 Docker Toolbox 版 本 


l] Setup - Docker Toolbox NM ees) 


Welcome to the Docker Toolbox 
Setup Wizard 


This ий install Docker Toolbox version 18.01.0-ce on your 
computer. 


It is recommended that you dose all other applications before 
continuing. 


Click Next to continue, or Cancel to exit Setup. 


[El Heip Docker improve Toolbox. 


This collects anonymous data to help us detect installation 
problems and improve the overal experience. We only use it 
to aggregate statistics and wil never share it with third 
parties. 


Cem) (Loma ) 


A.6 Docker Toolbox 安装 向 导 1 


E Sep - Docter Tost WENN NN intct 


Select Destination Location 
| Where should Docker Toolbox be installed? 


k Setup wil instal Docker Toolbox into the following folder. 


To continue, dick Next. If you would ike to select a different folder, dick Browse. 
EE: Program Files Dockes Toobox] | [ wewse.. J 


At least 107.9 MB of free disk space is required. 


[sm (nent) [ сакы | 


图 A.7 Docker Toolbox 安装 向 导 2 


209. SMB 
200. AB 
102.08 
168.08 
205. AB 


194. IB 
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E Senp -Docter Tonea B00 icc 
Select Components 
Which components should be installed? 


Select the components you want to install; dear the components you do not want to 
install. Cick Next when you are ready to continue. 


Fulinstalaton — —5 0 0 ë T 


[4] Docker Client for Windows. 


36.0M8 
[Z] Docker Machine for Windows 70.7 B 
[Z| Docker Compose for Windows 6.4MB 
[V] VirtualBox 80.6MB. 
[V] Kitematic for Windows (Alpha) 144.5 MB. 
(vi 


(«B met» ) [ Cancel ] 


图 A.8 Docker Toolbox 安装 向 导 3 
单 击 Next 按钮 ,如 图 A. 9 Bros o 


DD sep Docker Toota 0000000 lesa 


Select Additional Tasks 
Which additonal tasks should be performed? 


Select the additonal tasks you would ike Setup to perform whie instaling Docker 
Toolbox, then dick Next. 


IV) Сезе a desktop shortest 

[V] Add docker binaries to PATH 

[V] Upgrade Boot2Docker VM 

[V] Install VirtualBox with NDISS driver [default NOISE] 


Сак (вах) (Сеа) 


图 A.9 Docker Toolbox 安装 向 导 4 


单 击 Next 按钮 ,如 图 A. 10 所 示 。 

单 击 Install 按钮 ,如 图 А. 11 所 示 。 

单 击 “ 安 装 ” 按 钮 ,如 图 А. 12 所 示 。 

单 击 Finish 按钮 ,安装 完成 后 ,桌面 增加 了 三 个 快捷 图 标 ,如 图 A. 13 所 示 。 

双击 Docker Quickstart Terminal, 出 现 如 图 A. 14 所 示 的 画面 。 

图 A. 14 中 说 的 意思 是 ,没有 找到 默认 的 Boot2Docker ISO 文件 ,正在 下 载 最 新 的 发 布 
包 。 但 实际 上 ,这 个 文件 在 安装 路 径 中 已 经 有 了 。 将 安装 路 径 C:\Program Files\Docker 
Toolbox 下 的 文件 boot2docker. iso 复制 到 C:\Users\lenovo\. docker\cache( 这 里 lenovo 
是 登录 Windows? 的 用 户 名 称 )。 重 新 启动 Docker Quickstart Terminal。 显 示 如 下 ,说 明 
Docker 启动 成 功 。 至 此 ,Windows7 上 的 Docker 安装 完成 。 


=a s s 


| Ready to Install. 
| ‘Setup is now ready to begin installing Docker Toolbox on your computer. 
| 


Click Install to continue with the installation, or dick Back if you want to review or 
change any settings. 


Em Joe] [oe | 


图 A.10 Docker Toolbox 安装 向 导 5 


您 想 安 装 这 个 设备 软件 吗 ? 


fs: Oracle Corporation титаном 
HBA: Oracle Corporation 


Г] 始终 信任 来 自 "Oracle Corporation" 的 软件 (A)。 


图 A.11 Docker Toolbox 安装 向 导 6 


Completing the Docker Toolbox 
Setup Wizard 


Setup has finished installing Docker Toolbox on your computer. 
The application may be launched by selecting the installed 
shortcuts. 


(Click Finish to exit Setup. 


A.12 Docker Toolbox 安装 向 导 7 
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图 A. 13 Docker Toolbox 快捷 图 标 


r — = 3 
© Docker Quickstart Terminal am a = 


eating Cñ: C:\Users\lenovo\.docker\nachine\certs\ca.pen P: 
eating client certificate: C:\Jsers\lenovo\.docker \nachine \certs\cert.pen 

Running pre-create chec 

Kdefault? Image cache directory does not exist, creating it at C:Wsers\lenovos. 

KockersnachineNcache... 

Kdefault? No default Boot2Docker ISO found locally, dounloading the latest relea 


default) Latest release for github.com/boot2docker/boot2docker is v18.01.0-ce 
Kdefault? Downloading C: Wsers\lenovo\.docker\machine \cache\boot2docke 0 fron| 
//github.con/boot2docker/boot2docker/rele doun load/v18 .81 .0-ce/boot24d| 


ror with pre-create check: "Get https://github-production-release- 
0n/14930729 /634F bShO-f6ac—11e?-B8f12-e1c4544a979b?X-Anz-Algo 
Credent ial=AKI AIWNJYAX4CSUEHS3A%2F2018020872Fus—east—1 
&X-finz-Date -20180208T024105Z&-finz-Expires -3808-fnz-Signature- 
|eb36a886be9088a05305bF822c48b55f d3d2e499BF699e98cdB79BF c3a71e1318-fm. 


Я connection attempt failed because the connected party d| 
ond after a period of time, or established connection failed| 
because connected host has failed to respond. 
like something went wrong in step Checking if machine default exist: 
any key to continue... 


图 A.14 首次 启动 Docker Quickstart Terminal 


Docker Quickstart Terminal 启动 成 功 后 ,如 图 A. 15 所 示 。 

注意 ,首次 运行 Docker Quickstart Terminal, 将 在 默认 的 文件 夹 (C:\Users\lenovo\. 
docker) 中 创建 一 些 文件 (例如 ,虚拟 磁盘 文件 disk. vmdk)。 当 下 载 了 一 些 镜 像 文件 后 , 虚 
拟 磁盘 文件 disk. vmdk 会 变 得 很 大 。 如 果 需 要 ,可 以 改变 这 些 文件 的 位 置 。 在 首次 运行 
Docker Quickstart Terminal 之 前 ,新 建 一 个 环境 变量 MACHINE_STORAGE_PATH ,就 
会 改变 这 些 文件 的 位 置 。 

注意 ,由 于 版 本 升级 ,如 果 不 是 用 最 新 版 本 安装 ,Boot2Docker. ISO 可 能 不 是 最 新 文件 。 
可 以 在 浏览 器 直接 下 载 ,例如 ,在 https:/ 
下 载 boot2docker. iso, 如 图 A. 16 所 示 。 

单 击 boot2docker. iso 链接 下 载 boot2docker. iso, 

如 果 Windows 满足 系统 的 要 求 (Windows10x64 位 ,支持 Hyper-V), 可 以 单 击 “ 下 载 
Docker for Windows” 按 钮 ,下 载 文 件 InstallDocker. msi。 直 接 安 装 Docker, 


github. com/boot2docker/boot2docker/releases 


= 7 
© MINGW64:/c/Users/lenovo (= 2 шы 


ш 
[Ez 
LEX ZEE 


lm. 


configured to use the default machine with IP 192.168.99.100 
For help getting started, check out the docs at https://docs.docker.com 


图 A. Docker Quickstart Terminal 启动 成 功 
github.com 
p 收藏 ” 口 手 机 收藏 夫 AR SAR Eee 门 网 址 大 全 С) 3608€ DNN Links ` Mic 


O Features Business Explore Marketplace Pricing 


О boot2docker / boot2docker © Watch 


<> Code Issues 351 Pull requests 13 


v18.06.0-ce-rc2 
[$] tianon rel 


v18.06.0-ce 


© e364a 


Assets 
ff boot2docker.iso 


[D Source code (zip) 


图 A.16 Т boot2docker. iso 


为 了 给 Docker Tools Box for Windows 设置 代理 ,在 Docker Quickstart Terminal 4 
入 如 下 命令 : 


docker - machine ssh default 
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进入 Linux 命令 行 ,输入 如 下 命令 编辑 配置 文件 : 
sudo vi /var/lib/boot2docker/profile 

在 profile 文件 中 填 入 代理 : 

export "HTTP_PROXY = http://proxy. host:port" 

export "HTTPS_PROXY = https://proxy. host:port" 


export "NO_PROXY = 192.168.99.100" 


保存 后 输入 如 下 命令 重启 Docker 服务 : 


sudo /etc/init.d/docker restart 

输入 命令 exit 退出 Linux 命令 行 ,返回 Docker Quickstart Terminal 命令 行 。 

Docker Toolbox 是 一 个 针对 旧 的 Mac 和 Windows, 创 建 Docker 环境 的 辅助 工具 包 。 
其 中 包括 : 


Docker Machine 一 一 使 我 们 可 以 使 用 docker-machine 命令 在 虚拟 机 上 安装 Docker 
引擎 ,管理 虚拟 机 。 

Docker Engine 通常 ,Docker 指 的 是 Docker Engine, 它 是 一 个 由 Docker 守护 进 
FE REST API( 与 守护 进程 交互 的 接口 )、 客 户 端 (命令 行 接口 CLI, 与 守护 进程 通 
信 ) 组 成 的 C/S 应 用 。 使 我 们 可 以 使 用 Docker 命令 。 

Docker Compose 一 一 用 于 定义 和 运行 多 个 容器 的 Docker 应 用 ,可 以 使 用 YAML 文 
件 配 置 应 用 的 服务 ,然后 使 用 docker-compose 命令 启动 所 有 服务 。 

Kitematic 一 一 Docker 图 形 用 户 界面 。 

H Docker 命令 行 预 置 的 shell, 

Oracle VirtualBox 一 一 一 款 开 源 的 虚拟 机 软件 。 


Docker 常用 命令 


Docker Toolbox 有 三 个 命令 : docker、docker-machine 和 docker-compose. 

docker: 容器 的 运行 时 命令 ,使 用 docker 命令 ,可 以 创建 ,发 布 .下 载 Docker 镜像 ,管理 
Docker 容器 。 

docker-machine: 用 于 在 虚拟 机 上 安装 Docker 引擎 ,创建 ,管理 Docker 主机 。 使 用 
docker-machine 命令 ,可 以 启动 ,检查 ,停止 和 重新 启动 托管 主机 ,升级 Docker 客户 端 和 守 
护 进程 ,并 配置 Docker 客户 端 与 主机 进行 对 话 。 

docker-compose: 用 于 定义 和 运行 多 容器 Docker 应 用 。 利 用 docker-compose 命令 ,可 
以 用 一 个 YAML 文件 (docker-compose. yml) 设 置 应 用 的 服务 ,然后 ,使 用 单个 命令 ,创建 和 
启动 配置 文件 中 设置 的 所 有 服务 。 


在 命 


ir a WE help 可 以 查看 命令 的 用 法 。 可 以 注意 到 每 个 命令 又 有 子 命令 。 


在 使 用 Docker 命令 时 ,如 果 需 要 使 用 容器 或 镜像 id 时 ,无 需 全 部 id, 只 需 前 几 个 字符 ， 
也 可 使 用 “容器 镜像 名 : 版 本 号 ”形式 。 
Docker 命令 的 常用 子 命令 如 表 A. 1 所 示 。 


附录 A 


RAL docker 命令 的 常用 子 命令 


" s 命 令 


作用 和 说 明 


1 docker images 


查看 本 机 的 镜像 ,可 通过 该 方法 查看 到 镜像 id 等 信息 


docker pull [options] name 


获取 镜像 。 其 中 ,name 为 镜像 名 [:tag] 为 版 本 ,默认 为 


[:tag] 最 新 的 (也 就 是 会 自己 加 上 一 个 参数 latest) 

3 docker rmi < 镜像 id > 删除 镜像 (需要 删除 其 下 所 有 容器 ) 
运行 镜像 ,构建 出 一 个 容器 。-d 是 可 选项 ,表示 后 台 运 
行 。 进 行 端口 映射 ,例如 ,使 用 下 面 的 可 选项 
-8080:80 
将 容器 内 的 80 端口 映射 到 主机 的 8080 端口 
挂 载 目录 : 将 宿主 机 的 文件 共享 给 容器 ,例如 
docker run -d —name = test -v /opt/test:/usr/databases 
docker-test 

4 docker run -d image test 是 容器 的 名 字 , 需 唯一 
-表示 创建 一 个 数据 卷 并 挂 载 到 容器 里 ， 
示例 表示 把 宿主 机 的 /opt/test 目录 挂 载 到 容器 的 /usr/ 
databases 目录 下 
docker-test 是 镜像 的 名 字 
查看 容器 当前 信息 ,可 在 该 命令 的 Mounts 信息 中 ,找到 
挂 载 目 录 信 息 
docker inspect < 容器 id > 

5 docker ps 查看 目前 正在 运行 的 容器 

6 docker ps -a 查看 所 有 容器 

7 docker stop < 容器 id > 停止 容器 

8 docker rm < 容器 id < 删除 容器 

9 


docker start < 容器 id > 


启动 一 个 运行 (run) 过 的 容器 


docker exec [options] container 


command [arg...] 


在 运行 的 容器 中 执行 命令 。 例 如 : 
docker exec -it < 容器 id > bash 
可 以 进入 一 个 容器 。 


docker build [ OPTIONS] PATH 
| URLI- 


依据 文件 Dockerfile 制作 镜像 文件 


docker commit [ OPTIONS ] 
12 CONTAINER [ REPOSITORY 
[:TAG]]] 


从 容器 创建 一 个 新 的 镜像 文件 


制作 镜像 


下 面 以 制作 一 个 简单 的 镜像 文件 为 例 ,介绍 制作 镜像 的 基本 方法 。 假 定 有 一 个 Web 应 
用 一 一 myweb. war。 我 们 想 在 Docker 容器 上 运行 这 个 Web 应 用 。 

在 Docker Tools 的 安装 目录 中 创建 一 个 子 目录 ,例如 ,workspace, 将 myweb. war 复制 
到 workspace 中 。 在 workspace 中 创建 文件 Dockerfile ,编辑 输入 如 下 内 容 : 


# (继承 自 哪个 镜像 ) 注 意 ,注释 不 能 添加 在 和 命令 同行 ,会 报错 


FROM tomcat 
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# (维护 人 员 信 息 ) 

MAINTAINER kehua 527358657@ qq. com 

# (同一 目录 下 要 打包 成 镜像 的 文件 ,复制 到 tomcat 的 运行 目录 下 ) 
COPY myweb. war /usr/local/tomcat/webapps 


然后 在 workspace 目录 下 使 用 下 面 的 命令 制作 镜像 文件 : 
docker build. - t myweb:latest 


使 用 命令 docker images 查看 镜像 文件 myweb 出 现在 镜像 文件 列表 中 , 
使 用 如 下 的 命令 验证 镜像 文件 工作 正常 。 


docker run - d - p 8888:8080 myweb 


Dockerfile 文件 中 还 可 以 使 用 如 下 的 命令 : 

RUN 一 一 执行 容器 中 操作 系统 的 命令 (例如 ,对 于 CentOS, 可 以 执行 cp ,mv 等 等 。) 

EXPOSE 一 一 指定 该 容器 暴露 的 端口 ,可 以 通过 多 个 EXPOSE 暴露 多 个 端口 。 

ENV 一 一 设置 环境 变量 。 例 如 ,ENV JAVA_HOME /var/java。 

ADD 一 一 将 本 地 文件 复制 到 容器 中 。 例 如 ADD. /usr/local/app. “. ”表示 当前 目录 
中 的 所 有 文件 。 

CMD 一 一 容器 启动 时 执行 的 命令 ,最 多 一 条 。 


A.2 Maven 基础 


Apache Ant(http://ant. apache. org/) 是 一 个 应 用 程序 构建 工具 ,主要 用 于 Java 应 用 
的 构建 。Ant 内 置 的 任务 使 我 们 可 以 编译 装配、 测试 和 运行 Java 应 用 。Ant 也 可 以 应 用 
于 非 Java 应 用 的 构建 ,例如 C 或 C++ 应 用 。 如 果 软 件 开 发 项 目 不 仅 需 要 构建 工具 ,还 需要 
依赖 管理 ,可 以 使 用 Apache 的 Ant 和 Ivy. 

Maven 起 源 于 Jakarta Turbine 项 目 ,Jakarta Turbine 项 目 使 用 的 是 Ant 构建 工具 ， 
Jakarta Turbine 项 目 有 几 个 Ant 子 项 目 , 每 个 项 目 都 有 自己 的 build. xml 文件 ,为 了 简化 这 
些 项 目的 构建 ,Maven 就 应 运 而 生 了 。 

Gradle(https: //gradle. org/) 是 一 个 基于 Apache Ant 和 Apache Maven 概念 的 项 目 自 
动 化 构建 工具 。 它 使 用 一 种 基于 Groovy 的 特定 领域 语言 (DSL) 来 声明 项 目 设 置 , 抛 奔 了 基 
T XML 的 各 种 烦琐 配置 。 


Maven 简介 


Apache Maven(http://maven. apache. org/) 是 一 个 基于 项 目 对 象 模 型 (Project Object 
Model,POMD) 的 软件 项 目 构建 和 管理 工具 , 它 的 主要 目标 是 使 开发 者 在 最 短 的 时 间 内 完成 
开发 任务 。 为 了 达到 这 个 目标 ,Maven 试图 解决 下 面 的 问题 : 

。 使 构建 过 程 更 容易 。 这 一 点 类 似 于 Ant. 

。 提供 一 致 的 构建 系统 。 只 要 熟悉 了 一 个 Maven 项 目的 构建 ,就 可 以 很 容易 地 用 于 

其 他 项 目的 构建 。 


t 提供 项 目 管理 信息 。Maven 提供 了 很 多 项 目 管理 信息 ,这 些 信息 来 源 于 POM 和 源 
代码 。 例 如 ,项 目 描述 、 开 发 者 列表 、 版 本 控制 系统 地 址 、 版 本 发 布 管理 、 缺 陷 管理 系 
统 地 址 \ 依 赖 列表 、 包 含 测试 覆盖 的 单元 测试 报告 等 。 

。 提供 软件 开发 最 佳 实践 指导 。 例 如 ,单元 测试 的 规格 说 明 、 执 行 和 报告 都 是 Maven 
构建 的 任务 。 单 元 测试 的 最 佳 实践 是 测试 代码 与 源 代码 隔离 ,并 与 源 代码 有 相同 的 
目录 结构 。 

° 使 用 测试 用 例 命 名 约定 ( 即 测试 类 的 名 称 是 在 被 测 类 名 后 加 Test), 


在 Windows 环境 安装 Maven 


检查 JDK 安装 

下 载 Maven ,下 载 地 址 为 http://maven. apache. org/download. html, 包 含 针 对 不 同 平 
台 的 各 种 版 本 的 Maven 下 载 文 件 。 选 择 下 载 apache-maven-3. 5. 2-bin. zip. 

将 apache-maven-3. 5. 2-bin. zip 解压 到 磁盘 ,例如 C 盘 。 

设置 环境 变量 M2 HOME 指向 Maven 的 安装 目录 ,例如 ,C:\apache-maven-3. 5. 2, 
在 环境 变量 path 尾部 加 上 ”“%M2_HOME%Nbin;”。 

验证 Maven 安装 ,打开 cmd 命令 窗口 ,输入 "mvn -v”, 窗 口 显 示 如 图 A. 17 所 示 , 表 明 


Maven 安装 成 功 。 


Ф 管理 员 : Git CMD 


K 
"amd64", family: "windows" 


图 A.17 验证 Maven 安装 成 功 


Maven 配置 文件 settings. xml 


有 两 个 目录 中 有 settings. xml 文件 : 一 个 是 Maven 的 安装 目录 的 conf 子 目录 , 例 
如 ,C:\apache-maven-3. 5. 2\conf; 另 一 个 是 Windows 用 户 目录 的 . m2 子 目 录 , 例 如 ， 
C:\Users\lenovo\. m2。 这 两 个 文件 的 作用 范围 不 同 ,前 者 是 全 局 范围 的 , 整 台 计算 机 
上 的 所 有 用 户 都 会 直接 受到 该 配置 的 影响 ,而 后 者 是 用 户 范 围 的 ,只 有 当前 用 户 才 会 
受到 该 配置 的 影响 。 默 认 情 况 下 , .m2 文件 夹 下 放置 了 Maven 本 地 仓库 .m2/ 
repository。 所 有 的 Maven 构件 (artifact) 都 被 存储 到 该 仓库 中 ,以 方便 重用 。 可 以 在 配 
置 文件 settings. xml 中 设置 Maven 本 地 仓库 的 位 置 ,还 可 以 在 配置 文件 settings. xml 中 


设置 代理 服务 器 。 
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Maven 的 使 用 


Maven 项 目的 核心 是 pom. xml, 它 定义 了 项 目的 基本 信息 ,用 于 描述 项 目 如 何 构建 、 声 
明 项 目 依赖 ,等 等 。 

Maven 的 使 用 有 两 种 方式 : 一 种 是 在 命令 行 输入 命令 ; 另 一 种 是 在 Eclipse 中 使 用 。 在 
cmd 命令 行 ,改变 目录 到 Maven 项 目 pom. xml 文件 所 在 的 目录 中 ,输入 Maven 的 命令 ,例如 : 


mvn build 


可 以 完成 项 目的 构建 。 

在 Eclipse 中 使 用 Maven 需要 安装 Maven 插件 ,启动 Eclipse 之 后 ,在 菜单 栏 中 选择 
Help, 然 后 选择 Install New Software 菜单 项 ,接着 会 看 到 一 个 Install 对 话 框 , 单 击 Work 
with: 后 的 Add 按钮 ,会 得 到 一 个 新 的 Add Repository 对 话 框 ,在 Name 文本 框 中 输入 
m2e, Location 文本 框 中 输入 http://m2eclipse. sonatype. org/sites/m2e, 然 后 单 击 ОК fk 


钮 。Eclipse 会 下 载 m2eclipse 安装 站 点 上 的 资源 信息 。 等 待 资 源 载 入 完成 之 后 ,再 将 其 全 
部 展开 ,就 能 看 到 如 图 A. 18 所 示 的 界面 。 


es 
- — 
Available Software | 
Check the items that you wish to install. | 
| 
Work with: т2е - http://m2eclipse.sonatype.org/sites/m2e - Баа] 
Find more software by working with the “Available Software Sites" preferences. 
中 type filter text 
Name Version 
4 [V] 100 Maven Integration for Eclipse 
GÈ Maven Integration for Eclipse (Required) 0.12.1.20110112-1712 
SelectAl | (Deselect ll] 1 item selected 


Details 


(Show only the latest versions of available software Ніде items that are already installed 
V] Group items by category What is already installed? 

El Show only software applicable to target environment 

[VI Contact all update sites during install to find required software 


@ Сағ oe s= Z=] 


图 A.18 Eclipse 安装 Maven 插件 


按 提示 操作 ,直到 安装 完成 。 


单 击 Eclipse 主 菜 单 中 的 Windows>Preferences 菜单 项 ,在 弹出 的 对 话 框 中 ,展开 左边 
的 Maven 选项 ,选择 Installation 子 项 ,在 右边 的 面板 中 ,能 够 看 到 有 一 个 默认 的 Embedded 


附录 A 319 
АА 


Maven 安装 被 选中 了 , 单 击 Add 按钮 ,然后 选择 Maven 安装 目录 M2_HOME, 添 加 完毕 之 
后 选择 一 个 外 部 的 Maven, 如 图 A. 19 所 示 。 


@ Prefe а аЬ Vu 


Select the installation used to launch Maven: 
Name Details 
EMBEDDED 3.3.3/1.6.0.20150526-2031 


园 WORKSPACE % NOTAVAMABLE(SO) _ ] 
apache-maven-3.5.2 CAapache-maven-3.5.2 3.5.2 


Note: Embedded runtime is always used for dependency 


resolution. 


(Genore ptouts] (= дору.) 
Ce) io ) 


图 A.19 Eclipse 中 设置 Maven 安装 


选择 左边 Maven 下 的 User Settings 选项 , 单 击 Global Settings 文本 框 右边 的 Browse 
按钮 ,选择 Maven 安装 目录 的 子 目录 conf 下 的 settings. xml 文件 ,如 图 A. 20 所 示 。 


User Settings 

Global Settings (open file): 
CAapache-maven-3.5.2\conf\settings.xml 
User Settings (open file): 
CAUsers\lenovol.m2\settings xml 


Local Repository (From merged user and global settings): 
CAUsers\enovo\ m2\repository 


Java EE Integration 
Lifecycle Mapping 
Templates 

User Interface 


User Settings 


A.20 Eclipse 中 设置 Maven 用 户 配置 文件 
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在 Eclipse 环境 中 ,可 以 导入 Maven 项 目 或 者 创建 Maven WA. {т Maven 项 目的 
pom. xml 文件 ,在 弹出 的 快捷 菜单 中 选择 Run As-Maven Build 菜单 项 ,可 以 完成 项 目的 


构建 
А.з Git 基础 


什么 是 Git 


Git 是 一 个 开源 的 分 布 式 版 本 控制 系统 ,可 以 有 效 、 高 速 地 处 理 从 很 小 到 非常 大 的 项 
Н. Git 是 Linus Torvalds 为 了 帮助 管理 Linux 内 核 开发 而 开发 的 一 个 开放 源码 的 版 本 控 
制 软件 。 

Torvalds 开始 着 手 开发 Git 是 为 了 作为 一 种 过 渡 方 案 来 替代 BitKeeper, 后 者 之 前 一 
直 是 Linux 内 核 开发 人 员 在 全 球 使 用 的 主要 源 代码 工具 。 开 放 源 码 社 区 中 的 有 些 人 觉得 
BitKeeper 的 许可 证 并 不 适合 开放 源码 社区 的 工作 ,因此 Torvalds 决定 着 手 研究 许可 证 更 
为 灵活 的 版 本 控制 系统 。 尽 管 最 初 Git 的 开发 是 为 了 辅助 Linux 内 核 开发 的 过 程 ,但 是 我 
们 已 经 发 现在 很 多 其 他 自由 软件 项 目 中 也 使 用 了 Git。 例 如 ,很 多 Freedesktop 的 项 目 迁 移 
到 了 Git 上 。 

Git 与 常用 的 版 本 控制 工具 CVS、Subversion 等 不 同 , 它 采用 了 分 布 式 版 本 库 的 方式 ， 
不 需要 服务 器 端 软 件 支持 。 


# Windows 上 安装 Git 


在 Windows 上 使 用 Git, 可 以 从 Git 官网 (https://git-scem. com/) 直 接 下 载 安装 程序 ， 
然后 按 默 认 选 项 安装 即 可 。 

安装 完成 后 ,在 “开始 ”菜单 选择 Git Git Bash 菜单 项 ,弹出 一 个 与 命令 行 窗口 类 似 的 
窗口 ,这 就 说 明 Git 安装 成 功 ! 

安装 完成 后 ,还 需要 最 后 一 步 设置 ,在 命令 行 输入 : 

$ git config -- global user.name "Your Name" 

$ git config —- global user. email "email@example. com" 

因为 Git 是 分 布 式 版 本 控制 系统 ,所 以 ,每 台 机 器 都 必须 自 报 家 门 : 你 的 名 字 和 Email 
地 址 。 

注意 git config 命令 的 -global 参数 ,用 了 这 个 参数 ,表示 这 台 机 器 上 所 有 的 Git 仓库 都 
会 使 用 这 个 配置 ,当然 也 可 以 对 某 个 仓库 指定 不 同 的 用 户 名 和 Email 地 址 。 


Git 的 使 用 
首先 创建 一 个 文件 夹 , 在 这 个 文件 夹 中 输入 如 下 命令 : 
git init 


初始 化 文件 夹 ,使 其 被 git 管理 。 
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把 文件 添加 到 版 本 仓库 ,输入 如 下 命令 : 


git add readme. txt 
git commit 一 m "commit readme. txt" 


从 git 仓库 中 克隆 到 本 地 当前 目录 ,例如 : 
git clone https://github. com/YOUR — GITHUB — ACCOUNT - NAME/simple — java – maven — app 


这 里 YOUR-GITHUB-ACCOUNT-NAME 是 你 的 Github 账号 。 
虽然 Git 不 需要 一 个 中 心服 务 器 就 可 以 使 用 ,但 是 进行 团队 开发 时 ,还 是 有 一 个 中 心服 
务 器 会 更 便于 管理 。 对 于 学 习 者 来 说 ,常用 Github(https://github. com/) 作 为 远程 仓库 。 
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